Questions marquées «spark-csv»

Comment afficher le contenu d'une colonne complète dans une trame de données Spark?

J'utilise spark-csv pour charger des données dans un DataFrame. Je veux faire une simple requête et afficher le contenu: val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv") df.registerTempTable("tasks") results = sqlContext.sql("select col from...

Écrire un seul fichier CSV à l'aide de spark-csv

J'utilise https://github.com/databricks/spark-csv , j'essaie d'écrire un seul CSV, mais pas en mesure de le faire, il crée un dossier. Besoin d'une fonction Scala qui prendra des paramètres tels que le chemin et le nom de fichier et écrira ce fichier