Il semble que la documentation sur la classe hadoop filesystem.statistics manque quelque peu. Qu'entend-on par "octets lus" et "octets écrits" et comment les compteurs sont-ils implémentés?Statistiques du système de fichiers Hadoop (FileSystem.Statistics)
Qu'est-ce que l'on entend par « octets lus » et « octets écrits »
Selon le Hadoop : The Definitive Guide
Filesystem octets lus - Le nombre d'octets lus par chaque système de fichiers par carte et réduire les tâches. Il y a un compteur pour chaque système de fichiers: Système de fichiers peut être local, HDFS, S3, KFS, etc.
octets écrits Filesystem - Le nombre d'octets écrits par chaque système de fichiers par carte et réduire les tâches.
Comment les compteurs sont-ils implémentés?
Vérifiez ces tutoriels (1, 2, 3) sur la façon dont les compteurs sont mis en œuvre.
Ceci est une réponse utile ...... mais ce n'est pas clair le lien entre la définition, et la mise en œuvre ... en tout cas, examiner de plus près vos tutoriels et voir si les détails sont là. – jayunit100
Ce n'est pas clair ce qui n'est pas clair pour vous :) Passez par les tutoriels, puis à travers le code Hadoop pour comprendre plus en détails. –