spark-cloudant

2La chaleur

2Répondre

Pourquoi l'assembly sbt dans le projet Spark échoue-t-il avec "Veuillez ajouter des dépendances Spark en fournissant les composants sparkVersion et sparkComponents"?

Je travaille sur un projet Spark géré par sbt avec la dépendance spark-cloudant. Le code est available on GitHub (on spark-cloudant-compile-issue branch). J'ai ajouté la ligne suivante à build.sbt: "c

0La chaleur

1Répondre

com.cloudant.spark source de données introuvable dans DSX Notebook

J'essaie de suivre https://developer.ibm.com/clouddataservices/docs/ibm-data-science-experience/docs/load-and-filter-cloudant-data-with-spark/ pour charger des données de cloud avec Spark. J'ai Scala

1La chaleur

2Répondre

package Spark-cloudant 1.6.4 chargé par% AddJar ne soit pas utilisé par bloc-notes

Je suis en train d'utiliser le dernier paquet d'étincelles cloudant avec un ordinateur portable: %AddJar -f https://github.com/cloudant-labs/spark-cloudant/releases/download/v1.6.4/cloudant-spark-v1.6

0La chaleur

1Répondre

Quelle est la solution pour l'erreur, "JBlas n'est pas un membre de package ou apache"?

J'ai essayé de le résoudre à partir de ces deux ( this et this) threads, et cela a fonctionné pour moi sur ma propre machine virtuelle mais ne fonctionnait pas dans le cloud dataproc. J'ai fait le mêm

0La chaleur

1Répondre

calcul dissymétrie utilisant spark.sql et Cloudant

J'ai des problèmes avec le morceau de code suivant: def skewTemperature(cloudantdata,spark): return spark.sql("""SELECT (1/count(temperature)) * (sum(POW(temperature-%s,3))/pow(%s,3)) as skew fro

1La chaleur

1Répondre

Erreur Spark Cloudant: 'rien n'a été enregistré car le nombre d'enregistrements était 0!'

J'utilise la bibliothèque spark-cloudant 1.6.3 qui est installée par défaut avec le service spark. Je suis en train de sauver des données à Cloudant: val df = getTopXRecommendationsForAllUsers().toDF.