Existe-t-il un moyen de surveiller les processus Hive en cours d'exécution et de s'assurer qu'ils fonctionnent en parallèle?Hive/Hadoop: Surveiller les processus en cours
J'ai configuré un cluster Linux expérimental (4 machines) et je voudrais comprendre les processus sous-jacents. Top et ps ne me donnent pas trop d'infos.
requête Hive est divisée en plusieurs MR appelé sql_text stade 1, sql_text stade-2, etc.
Vous pouvez entrer l'interface utilisateur de JobTracker l'interface utilisateur Web de votre cluster sur
job_tracker_adress: 50030
Vous y verrez des emplois ruche et leurs progrès.
Pour chaque travail, il y aura une liste de tâches et pour chaque tâche que vous pouvez voir sur les nœuds qu'ils exécutent, et leurs statistiques de base
Super, merci! – JB2
Que voulez-vous surveiller? –