作者zeus83157 (KERNEL)
看板Python
标题[问题] pandas dataframe 转 spark dataframe 出现null
时间Sat Jul 14 19:53:10 2018
from pyspark import SparkContext
from pyspark.sql import SQLContext
.
.
.
sc = SparkContext()
sqlContext = SQLContext(sc)
.
.
.
people1 = sqlContext.createDataFrame(people1)
.
.
.
其中people是pandas的dataframe
https://imgur.com/a/ebzMO7Z
图中左边是spark的dataframe,右边是pandas的dataframe
可以看到黄色圆圈处,明明pandas的有东西,转过去spark就不见了
有人遇过这种状况吗?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 140.124.93.34
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1531569194.A.D4B.html
※ 编辑: zeus83157 (140.124.93.34), 07/14/2018 19:54:46