2017-10-19 28 views
0

Je travaille avec Apache SPARK et Python (pyspark) dans un environnement IDE Python nommé Spyder. Je suis en train de charger un fichier de HDFS comme ceci:Connexion refusée lors de la tentative de chargement du fichier HDFS à partir de Spyder

hdfs_file = sc.textFile(hdfs_path) 

Je me assure que le chemin est correct et que le fichier existe, mais quand j'exécute la commande, je reçois la prochaine ligne d'erreur:

Py4JJavaError: An error occurred while calling o24.partitions. 
: java.net.ConnectException: Call From XXXX.local/127.0.0.1 to localhost:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused 

Que puis-je faire pour charger correctement les fichiers à partir de HDFS?

Répondre

1

Résolu!

Ce n'était que le démarrage du serveur hdfs.