Programação scala

7

Como criar um DataFrame vazio com um esquema especificado?

Eu quero criar DataFramecom um esquema especificado no Scala. Tentei usar a leitura JSON (quero dizer, ler um arquivo vazio), mas não acho que seja a melhor prática.

94 scala apache-spark dataframe apache-spark-sql

3

Por que o conjunto imutável de Scala não é covariante em seu tipo?

EDIT : Reescrita esta pergunta com base na resposta original A scala.collection.immutable.Setclasse não é covariante em seu parâmetro de tipo. Por que é isso? import scala.collection.immutable._ def foo(s: Set[CharSequence]): Unit = { println(s) } def bar(): Unit = { val s: Set[String] = Set("Hello", "World"); foo(s); //DOES NOT COMPILE, regardless …

94 scala set covariance scala-collections

3

Quais são alguns exemplos de casos de uso para literais de símbolo em Scala?

O uso de literais de símbolo não é imediatamente claro pelo que li no Scala. Alguém se importaria em compartilhar alguns usos do mundo real? Existe um idioma Java específico sendo coberto por literais de símbolo? Quais linguagens têm construções semelhantes? Venho de uma experiência em Python e não tenho …

93 syntax scala

5

Como posso converter immutable.Map em mutable.Map no Scala?

Como posso converter immutable.Mappara mutable.Mapno Scala para que eu possa atualizar os valores em Map?

93 scala dictionary scala-2.8

1

Quais são os casos de uso de scala.concurrent.Promise?

Estou lendo SIP-14 e o conceito de Futurefaz todo o sentido e fácil de entender. Mas tenho duas perguntas sobre Promise: O SIP diz Depending on the implementation, it may be the case that p.future == p. Como isso pode ser? São Futuree Promisenão dois tipos diferentes? Quando devemos usar …

93 scala concurrency

3

Conversão implícita vs. classe de tipo

No Scala, podemos usar pelo menos dois métodos para adaptar os tipos existentes ou novos. Suponha que queremos expressar que algo pode ser quantificado usando um Int. Podemos definir o seguinte traço. Conversão implícita trait Quantifiable{ def quantify: Int } E então podemos usar conversões implícitas para quantificar, por exemplo, …

93 scala coding-style implicit-conversion

3

“Nova” palavra-chave em Scala

Eu tenho uma pergunta muito simples - quando devemos aplicar a nova palavra-chave ao criar objetos no Scala? É quando tentamos instanciar apenas objetos Java?

93 scala new-operator keyword

5

Renomeando os nomes das colunas de um DataFrame no Spark Scala

Estou tentando converter todos os nomes de cabeçalhos / colunas de um DataFrameno Spark-Scala. a partir de agora eu vim com o seguinte código que substitui apenas um único nome de coluna. for( i <- 0 to origCols.length - 1) { df.withColumnRenamed( df.columns(i), df.columns(i).toLowerCase ); }

93 scala apache-spark dataframe apache-spark-sql

3

Diferenças entre essas três maneiras de definir uma função em Scala

Dadas três maneiras de expressar a mesma função f(a) := a + 1: val f1 = (a:Int) => a + 1 def f2 = (a:Int) => a + 1 def f3:(Int => Int) = a => a + 1 Como essas definições diferem? O REPL não indica quaisquer diferenças óbvias: …

92 scala

3

Como aplico o padrão enriquecer minha biblioteca a coleções Scala?

Um dos padrões mais poderosos disponíveis em Scala é o padrão enriquecer minha biblioteca *, que usa conversões implícitas para aparentar adicionar métodos a classes existentes sem exigir resolução de método dinâmico. Por exemplo, se desejássemos que todas as strings tivessem o método spacesque contasse quantos caracteres de espaço em …

92 scala collections enrich-my-library

1

HowTo: campo personalizado em Lift-Record-Squeryl

Estou tentando fazer um EnumListFieldem Lift / Record / Squeryl, semelhante a MappedEnumListem LiftMapper. O tipo de armazenamento deve ser Long / BIGINT. Eu entendo que se eu definir: def classOfPersistentField = classOf[Long] Então Squeryl saberá que deve criar uma coluna BIGINT. E eu sei que usa setFromAny()pra definir o …

92 scala lift record squeryl

10

Posso compactar mais de duas listas no Scala?

Dada a seguinte Lista de Scala: val l = List(List("a1", "b1", "c1"), List("a2", "b2", "c2"), List("a3", "b3", "c3")) Como posso obter: List(("a1", "a2", "a3"), ("b1", "b2", "b3"), ("c1", "c2", "c3")) Como zip só pode ser usado para combinar duas Listas, acho que você precisaria iterar / reduzir a Lista principal …

92 scala functional-programming list zip

30

O editor não contém um tipo principal

Acabei de ler o código de amostra do Scala no site do Scala, mas encontrei um erro irritante ao tentar executá-lo. Aqui está o código: http://www.scala-lang.org/node/45 . Ao executá-lo no Eclipse, recebi esta mensagem 'Editor não contém um tipo principal' que o impede de ser executado. Preciso fazer alguma coisa …

92 eclipse scala

4

Objetos de pacote

O que são objetos de pacote, não tanto o conceito, mas seu uso? Tentei fazer um exemplo funcionar e a única forma que consegui funcionar foi a seguinte: package object investigations { val PackageObjectVal = "A package object val" } package investigations { object PackageObjectTest { def main(args: Array[String]) { …

92 scala scala-2.8

14

Spark - Erro “Um URL mestre deve ser definido em sua configuração” ao enviar um aplicativo

Eu tenho um aplicativo Spark que é executado sem problemas no modo local, mas tenho alguns problemas ao enviar para o cluster Spark. As mensagens de erro são as seguintes: 16/06/24 15:42:06 WARN scheduler.TaskSetManager: Lost task 2.0 in stage 0.0 (TID 2, cluster-node-02): java.lang.ExceptionInInitializerError at GroupEvolutionES$$anonfun$6.apply(GroupEvolutionES.scala:579) at GroupEvolutionES$$anonfun$6.apply(GroupEvolutionES.scala:579) at scala.collection.Iterator$$anon$14.hasNext(Iterator.scala:390) …

92 scala apache-spark

Perguntas com a marcação «scala»