Perguntas com a marcação «spark-csv»

Estou usando o spark-csv para carregar dados em um DataFrame. Quero fazer uma consulta simples e exibir o conteúdo: val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv") df.registerTempTable("tasks") results = sqlContext.sql("select col from tasks"); results.show() A coluna parece truncada: scala> results.show(); +--------------------+ | col| +--------------------+ |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 07:15:...| …

201 apache-spark  dataframe  spark-csv  output-formatting 

Estou usando https://github.com/databricks/spark-csv , estou tentando escrever um único CSV, mas não consigo, estou criando uma pasta. Precisa de uma função Scala que pegará parâmetros como caminho e nome de arquivo e escreverá esse arquivo CSV.

108 scala  csv  apache-spark  spark-csv