J'ai expérimenté avec Mahout dans la VM de démonstration Cloudera et j'ai réussi à regrouper les données de contrôle synthétique de l'échantillon (https://cwiki.apache.org/MAHOUT/clustering-of-synthetic-control -data.html) en utilisant l'algorithme k-Means. J'ai utilisé ClusterDumper et peut voir la sortie de Mahout, mais maintenant je veux mettre la sortie dans une table Hive. Comment ferais-je cela?Déplacement de données en cluster de HDFS vers Hive
0
A
Répondre
1
Il n'y a pas d'intégration directe. Votre meilleur pari est de modifier ClusterDumper pour produire une sorte de représentation textuelle qui peut être importée dans Hive sous forme de données tabulaires.
0
Créez une table externe dans Hive, qui doit pointer vers le chemin o/p de Mahout.
Questions connexes
- 1. Déplacement de données vers HDFS avec Storm
- 2. Importer des données de HDFS vers Hive table
- 3. Copie de données Solr HDFS vers un autre cluster
- 4. Déplacement du cluster de données postgresql
- 5. Transfert de fichiers HDFS entiers d'un cluster vers un autre
- 6. Comment copier les fichiers HDFS d'un cluster vers un autre cluster en conservant l'heure de modification
- 7. Données d'interrogation de l'API REST vers HDFS
- 8. Quelques doutes sur HDFS, HBase et Hive
- 9. Hive charge le fichier vers les répliques de table
- 10. Configuration de Hadoop, HBase et Hive Cluster
- 11. Accès hdfs depuis l'extérieur du cluster
- 12. Importer des données de MySQL vers HDFS: ClassNotFoundException
- 13. Test de contrainte HDFS dans un cluster Hadoop multi-nœuds
- 14. Comment surveiller la progression de la réplication HDFS du cluster?
- 15. SPARK_RPC_CLIENT_CONNECT_TIMEOUT en cours d'exécution Hive On Spark - YARN Mode cluster
- 16. Exportation de HIVE vers un CSV
- 17. Sqoop, HDFS exportation vers MySQL en Java
- 18. Emplacement des données lors de l'utilisation d'un HDFS de cluster différent
- 19. Comment importer des fichiers csv du serveur ftp vers hadoop (HDFS/HIVE/HBASE)?
- 20. Transfert Java de HDFS vers S3
- 21. Comment déplacer la table de données Hive vers MySQL?
- 22. source de données à HDFS
- 23. Déplacement de données partielles dans des instances hadoop
- 24. Chargement en masse vers HDFS à partir de la base de données sybase
- 25. Copie d'un échantillon de fichier de hdfs vers fs local?
- 26. déplacement vers softlayer
- 27. Aucune table n'est créée dans HIVE mais les données sont crées dans hdfs
- 28. Déplacement d'Azure Table Storage vers une autre base de données
- 29. schéma Déplacement vers une autre base de données
- 30. Déplacement des données d'entrée utilisateur de Word vers Excel (macros)