Je suis nouveau pour tester. Existe-t-il un framework de test pour tester l'application exécutée dans Hadoop? J'ai des fichiers jar qui s'exécutent dans un cluster à 2 nœuds.Application de test fonctionnant dans Hadoop
-2
A
Répondre
0
Bien l'un des premiers endroits où vous pouvez commencer avec le test Hadoop est l'écriture de tests unitaires locaux en utilisant MRUnit. C'est l'équivalent de JUnit mais pour écrire des tests unitaires pour MapReduce.
- MRUnit Tutoriel - https://cwiki.apache.org/confluence/display/MRUNIT/MRUnit+Tutorial
0
Vous pouvez également exécuter les tests de dev sur jvm de JobTracker local en paramètre de configuration:
Configuration conf = new Configuration();
conf.set("fs.default.name", "file:///");
conf.set("mapred.job.tracker", "local");
Path input = new Path(getClass().getResource("/") + "testfile");
Path output = new Path(getClass().getResource("/") + "testfile_output");
Vous pouvez consulter le chapitre 5 du livre "Hadoop Definitive Guide"
Questions connexes
- 1. Test Hadoop à l'aide de MRUnit
- 2. Test de contrainte HDFS dans un cluster Hadoop multi-nœuds
- 3. débogage maven dans Vagrant - application HADOOP YARN
- 4. Application Ec2 + Hadoop pour Java
- 5. Cadre de test C# fonctionnant comme JUnit dans Eclipse?
- 6. Outils pour optimiser l'évolutivité d'une application Hadoop?
- 7. Une application fonctionnant sur UICC?
- 8. Application de test Android
- 9. Test simple de Mongo-Hadoop échouant avec NPE
- 10. Application hybride fonctionnant sur l'écran de verrouillage
- 11. Application Phonegap fonctionnant localement, ne fonctionnant pas au téléphone
- 12. Test de titre ne fonctionnant pas avec rspec/capybara
- 13. application de test dans mon appareil
- 14. Application .NET fonctionnant uniquement dans le dossier de débogage
- 15. Application fonctionnant dans Nexus un mais pas dans Htc héros
- 16. Test d'une application de bureau
- 17. Configuration de Hadoop ubuntu Nœud de nom, nœud de données ne fonctionnant pas jps
- 18. Trouver une application fonctionnant sur un réseau
- 19. Démarrage d'un simple serveur hadoop autonome en test unitaire
- 20. Test de charge Application ASP.net
- 21. Application de test sans UDID
- 22. Hadoop JUnit test d'écriture/lecture depuis/vers le hdfs
- 23. Logiciel de test de test fonctionnant sous Windows et Linux/Ubuntu
- 24. Comment puis-je obtenir les scripts de ligne de commande Hadoop fonctionnant sous Win32?
- 25. application android fonctionnant en mode débogage seulement
- 26. Test d'agent utilisateur utilisant Capybara ne fonctionnant pas
- 27. Test d'une application Swing
- 28. test d'une application web
- 29. Test fonctionnel application cocos2d
- 30. facebook application test