java – Spark:如何使用标题保存数据框?

前端之家收集整理的这篇文章主要介绍了java – Spark:如何使用标题保存数据框?前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
dataframe.saveasTextFile,仅以分隔格式保存数据.如何在JAVA中使用标题保存数据框.
sourceRufFrame.toJavaRDD().map(new TildaDelimiter()).coalesce(1,true).saveAsTextFile(targetSrcFilePath);

解决方法

如果你想保存为csv文件,我建议使用spark-csv包.你可以使用spark-csv保存你的数据帧,如下所示.
dataFrame.write
  .format("com.databricks.spark.csv")
  .option("header","true")
  .option("delimiter",<your delimiter>)
  .save(output)

您可以参考以下链接,了解更多信息:
https://github.com/databricks/spark-csv

Spark-csv有maven依赖.

猜你在找的Java相关文章