Comment puis-je exécuter une commande hdfs en tant qu'étape dans un cluster EMR? L'ajout de l'étape en tant que tâche script_runner.jar semble échouer bizarrement.Exécuter la commande HDFS en tant qu'ÉM Etape
Utilisez command-runner.jar et appelez le bash pour émettre votre commande hdfs.
aws emr add-steps --cluster-id j-XXXXXXXXX --steps Name="Command Runner",Jar="command-runner.jar",Args=[/bin/bash,-c,"\"hdfs dfs -mkdir /tmp/foo\""]
Notez que le dernier argument est passé comme une évasion unique chaîne entre guillemets à bash.