En informe, le type Nat représente un moyen d'encoder des nombres naturels à un niveau de type. Ceci est utilisé par exemple pour les listes de taille fixe. Vous pouvez même faire des calculs au niveau du type, par exemple ajouter une liste d' Néléments à une liste d' Kéléments et récupérer une...
Je sais qu'un seul test peut être exécuté en exécutant, dans sbt, testOnly *class -- -n Tag Existe-t-il un moyen de dire à sbt / scalatest d'exécuter un seul test sans balises? Par exemple: testOnly *class -- -X 2 cela signifierait "exécuter le deuxième test de la classe. Quoi qu'il en soit". Nous...
Selon Présentation des ensembles de données Spark : Alors que nous attendons avec impatience Spark 2.0, nous prévoyons quelques améliorations intéressantes aux ensembles de données, en particulier: ... Encodeurs personnalisés - alors que nous générons actuellement des encodeurs pour une grande...
Verrouillé . Cette question et ses réponses sont verrouillées car la question est hors sujet mais a une signification historique. Il n'accepte pas actuellement de nouvelles réponses ou interactions. Quelles sont les fonctionnalités cachées de Scala dont chaque développeur Scala devrait être...
Est-il possible de faire une correspondance sur une comparaison en utilisant le système de correspondance de modèles dans Scala? Par exemple: a match { case 10 => println("ten") case _ > 10 => println("greater than ten") case _ => println("less than ten") } La deuxième déclaration de...
Bien qu'il puisse y avoir des cas valides où de telles surcharges de méthodes pourraient devenir ambiguës, pourquoi le compilateur interdit-il le code qui n'est ni ambigu au moment de la compilation ni au moment de l'exécution? Exemple: // This fails: def foo(a: String)(b: Int = 42) = a + b def...
Suite à cette question , quelqu'un peut-il expliquer ce qui suit dans Scala: class Slot[+T] (var some: T) { // DOES NOT COMPILE // "COVARIANT parameter in CONTRAVARIANT position" } Je comprends la distinction entre +Tet Tdans la déclaration de type (elle compile si j'utilise T). Mais alors comment...
Je viens de commencer le développement de Scala / LiftWeb / Sbt, et j'aimerais importer un projet Sbt dans IntelliJ Idea. En fait, j'ai réussi à importer mon projet de deux manières différentes: 1) avec Maven. J'ai créé un projet Maven, et en plus j'ai créé un projet Sbt, que j'ai ensuite importé...
Je suis vraiment intéressé à découvrir où se trouvent les différences, et plus généralement, à identifier les cas d'utilisation canoniques où les HLists ne peuvent pas être utilisées (ou plutôt, ne donnent aucun avantage par rapport aux listes régulières). (Je suis conscient qu'il y en a 22 (je...
Quelle est la différence entre ==et .equals()dans Scala, et quand utiliser lequel? L'implémentation est-elle la même qu'en Java? EDIT: La question connexe parle de cas spécifiques de AnyVal. Le cas le plus général est
Je suis nouveau sur Scala et je n'ai pas vraiment trouvé grand-chose sur le typemot - clé. J'essaie de comprendre ce que l'expression suivante peut signifier: type FunctorType = (LocalDate, HolidayCalendar, Int, Boolean) => LocalDate FunctorType est une sorte d'alias, mais que...
J'ai installé Spark à l'aide du guide AWS EC2 et je peux lancer le programme correctement en utilisant le bin/pysparkscript pour accéder à l'invite Spark et je peux également effectuer le démarrage rapide avec succès. Cependant, je ne peux pas pour la vie de moi comprendre comment arrêter toute la...
Pour lire des fichiers dans Scala, il existe Source.fromFile("file.txt").mkString Existe-t-il un moyen équivalent et concis d'écrire une chaîne dans un fichier? La plupart des langues prennent en charge quelque chose comme ça. Mon préféré est Groovy: def f = new File("file.txt") // Read def s =...
J'ai un DataFrame généré comme suit: df.groupBy($"Hour", $"Category") .agg(sum($"value") as "TotalValue") .sort($"Hour".asc, $"TotalValue".desc)) Les résultats ressemblent à: +----+--------+----------+ |Hour|Category|TotalValue| +----+--------+----------+ | 0| cat26| 30.9| | 0| cat13| 22.1| | 0|...
Dans quels cas je devrais utiliser Array (Buffer) et List (Buffer). La seule différence que je connais est que les tableaux ne sont pas variables et que les listes sont covariantes. Mais qu'en est-il des performances et de certaines autres
Je voudrais lire un CSV dans Spark et le convertir en DataFrame et le stocker en HDFS avec df.registerTempTable("table_name") J'ai essayé: scala> val df = sqlContext.load("hdfs:///csv/file/dir/file.csv") Erreur que j'ai obtenue: java.lang.RuntimeException: hdfs:///csv/file/dir/file.csv is not a...
Comment puis-je convertir un RDD ( org.apache.spark.rdd.RDD[org.apache.spark.sql.Row]) en Dataframe org.apache.spark.sql.DataFrame. J'ai converti un dataframe en rdd en utilisant .rdd. Après l'avoir traité, je veux le remettre dans le dataframe. Comment puis-je faire ceci
Lorsqu'une classe de cas a de nombreux champs et que leurs noms sont longs, il est souvent judicieux d'écrire chaque champ dans chaque ligne comme: case class Person ( name: String, age: Int ) Cela ressemble à la structdéfinition C / C ++ et est totalement lisible même lorsque la classe de cas...
Dans l'état actuel des choses, cette question ne convient pas à notre format de questions-réponses. Nous nous attendons à ce que les réponses soient étayées par des faits, des références ou une expertise, mais cette question suscitera probablement un débat, des arguments, un sondage ou une...
J'ai un fichier data.xmldans src/test/resources/. Comment puis-je lire ce fichier dans un nouveau FileReaderdans mon test data.scalaensrc/test/scala/