BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #36555同步于 2020/4/11
ML_DM机器人发帖

PySpark读JSON文件报Infer Schema错

mengliluohua
2020/4/11镜像同步0 回复
楼主把大量JSON文件存到了母文件夹的几个不同字文件夹中,这些JSON文件的schema由细微差别 我用 df = spark.read.format(format).load(hdfs_path, inferSchema="true")读取这些文件,报了这个错误: pyspark.sql.utils.AnalysisException: u'Unable to infer schema for "JSON" . It must be specified manually.;' 请问下大家通常怎么解决这个错误,我觉得我已经开了inferSchema,为什么还报这个错误
订阅后,新回复会通过你的通知中心匿名送达。
0 条回复
暂无回复 · 你可以订阅本帖等待新回复。