J'ai une question sur les UDF sur Hive. Lorsque j'utilise un fichier UDF dans une requête de ruche, traite-t-il les données de manière MapReduce? Par exemple quand j'utilise la fonction moy. Est-ce que Hive convertit la fonction dans mapReduce Jobs? BestsRuche et fonctions définies par l'utilisateur
0
A
Répondre
0
Dans la plupart des cas, une requête Hive sera traduite en un travail de mappage/réduction (les exceptions sont des éléments tels que SELECT * sur une table HBase). La moyenne (avg) est une fonction d'agrégat intégrée et non un UDF mais cette ruche traitera les deux dans un travail de mappage/réduction.
Notez que les versions futures de la Ruche améliorerait probablement sur ce (voir par exemple ce post on Hive Stinger initiative), mais comme mentionné ci-dessus, il est actuellement la plupart du temps m/r
Questions connexes
- 1. tsql fonctions définies par l'utilisateur
- 2. Fonctions définies localement par doctest
- 3. Fonctions SQLITE définies par l'utilisateur dans Lisp
- 4. Entity Framework - Fonctions définies par le modèle
- 5. Fonctions définies par l'utilisateur dans Vim
- 6. Selenium RC fonctions définies par l'utilisateur
- 7. Fonctions en ligne définies par l'utilisateur OpenCL
- 8. Comment utiliser les fonctions définies par l'utilisateur?
- 9. Appliquer avec des fonctions définies par l'utilisateur
- 10. Utilisation des fonctions définies par l'utilisateur et des performances?
- 11. PHP Calcul de GPA et les fonctions définies par l'utilisateur
- 12. Fonctions définies par l'utilisateur de Mongo et réduction de carte
- 13. Module personnalisé fonctions non définies
- 14. comment charger automatiquement des fonctions définies par l'utilisateur dans mathematica
- 15. Débogage des fonctions définies par l'utilisateur de PostgreSQL
- 16. Notepad ++ intellisense pour les fonctions définies par l'utilisateur
- 17. Documentation pour les fonctions définies par l'utilisateur dans Scilab
- 18. Utilisation des fonctions définies par l'utilisateur dans Entity Framework
- 19. Fonctions définies par l'utilisateur Renvoyer la table dans MySQL
- 20. Formules dans des fonctions définies par l'utilisateur dans R
- 21. Comment utilisez-vous les fonctions définies par l'utilisateur dans fuseki?
- 22. Fonctions d'erreur PHP non définies
- 23. Comment: Fonctions d'appel définies par modèle dans les requêtes
- 24. Traitement des erreurs dans les fonctions définies par l'utilisateur
- 25. Où placer les fonctions définies par l'utilisateur dans Angular JS?
- 26. Les fonctions d'agrégat définies par l'utilisateur les plus utiles
- 27. Appel de fonctions définies par l'utilisateur dans PHP eval()
- 28. Liste des fonctions globales définies par l'utilisateur en JavaScript?
- 29. Fonctions MySQL définies par l'utilisateur pour générer la clé primaire
- 30. appel de fonctions définies par l'utilisateur avec Créer une table