2017-08-17 1 views
0

J'ai fait face à une situation étrange où je reçois des résultats différents de la commande hdfs dfs -du et ce que je vois dans cloudera gestionnaire UI, j'ai lu sur les différences entre les 2, mais n'a pas la moindre idée qui pourrait aider moi d'attraper le problème et l'ai résolu.La vérification de stockage HDFS montre des valeurs différentes

J'ai également supprimé tous les instantanés et les a interdits, mais le stockage n'a pas changé.

Voici la sortie:

[[email protected] root]$ hdfs dfs -du -h -s . 
2.3 G 5.8 G . 
[[email protected] root]$ hdfs dfs -du -h -s/
250.3 T 749.3 T 

gestionnaire Cloudera UI

J'ai aussi vérifié les hdfs dfsadmin -report qui montre les mêmes résultats que l'interface utilisateur

Configured Capacity: 1.54 PB 
DFS Used: 897.77 TB 
Non DFS Used: 2.98 GB 
DFS Remaining: 682.27 TB 
DFS Used%: 56.82% 
DFS Remaining%: 43.18% 
Block Pool Used: 897.77 TB 
Block Pool Used%: 56.82% 
DataNodes usages% (Min/Median/Max/stdDev): 11.17%/58.94%/69.35%/13.31% 
Live Nodes 45 (Decommissioned: 0) 
Dead Nodes 0 (Decommissioned: 0) 
Decommissioning Nodes 0 
Total Datanode Volume Failures 0 (0 B) 
Number of Under-Replicated Blocks 0 
Number of Blocks Pending Deletion 0 
Block Deletion Start Time 8/14/2017, 10:57:30 AM 
+0

Première De plus, les commandes 'hdfs dfs -du -h -s .' et' hdfs dfs -du -h -s/'sont différentes. Aussi, je pense que vous avez manqué de fournir une sortie de Cloudera UI. – daemon12

Répondre

0

i ajouté hdfs DSF -du - h -s. et hdfs dfs -du -h -s/juste pour montrer rien que je puisse manquer qui pourrait être sous/user/cloudera-scm.

L'interface utilisateur du gestionnaire cloudera affiche la même valeur que le fichier dfsadmin -report hdfs.

BTW, je résolu le problème où je trouve/tmp/logs/Cloudera-GCL utilisé 150T et intersting encore pourquoi ce volume n'a pas été pris en considération quand je courais hdfs DSF -h -s -du