apache-spark - 如何在pyspark中使用df.write.csv附加到csv文件？

Question

我正在尝试使用df.write.csv将数据附加到我的csv文件中。这是我在执行spark文档http://spark.apache.org/docs/2.0.1/api/python/pyspark.sql.html#pyspark.sql.DataFrameWriter之后所做的:

from pyspark.sql import DataFrameWriter
.....
df1 = sqlContext.createDataFrame(query1)
df1.write.csv("/opt/Output/sqlcsvA.csv", append) #also tried 'mode=append'

执行上面的代码给我错误:

NameError: name 'append' not defined

没有追加，错误:

The path already exists.

Answer 1

df.write.save(path='csv', format='csv', mode='append', sep='\t')