Hadoop: Code envoyé de maître à esclave

Question

J'ai lancé un cluster hadoop et soumis un travail au maître. Le fichier jar est uniquement contenu dans le maître. Est-ce que hadoop expédier le pot à toutes les machines esclaves au début du travail? Est-il possible que la machine esclave fonctionne avec la version précédente du code envoyée lors de la dernière exécution?

Merci
Bala

Answer 1

Depuis le tutoriel MapReduce:

Le cadre copiera les fichiers nécessaires au nœud esclave avant sont exécutées sur ce toutes les tâches pour le travail nœud. Son efficacité provient du le fait que les fichiers sont seulement copié une fois par le travail et la capacité de mettre en cache archives qui sont non-archivées sur les esclaves .

Plus d'infos ici:

http://hadoop.apache.org/common/docs/current/mapred_tutorial.html