spark 如何指定输出文件的文件名？

Question

spark 程序如何指定输出文件的文件名？网上都是 x.repartition(1).saveAsTextFile("a.txt"），但这是新建了一个 a.txt目录，请问如何输出 a.txt文件？

Answer 1

使用pairRDD.saveAs...方法，然后重写OutputFormat输出格式，修改该格式中的方法，就OK了