Perguntas com a marcação «apache-spark-dataset»

Eu só estou querendo saber qual é a diferença entre um RDDe DataFrame (Spark 2.0.0 DataFrame é um mero tipo de alias para Dataset[Row]) no Apache Spark? Você pode converter um para o outro?

257 dataframe  apache-spark  apache-spark-sql  rdd  apache-spark-dataset 

De acordo com a introdução de conjuntos de dados Spark : Como esperamos ansiosamente pelo Spark 2.0, planejamos algumas melhorias interessantes para conjuntos de dados, especificamente: ... Codificadores personalizados - enquanto atualmente geramos automaticamente codificadores para uma ampla variedade de tipos, gostaríamos de abrir uma API para objetos personalizados. e …

149 scala  apache-spark  apache-spark-dataset  apache-spark-encoders