Shell Unix trouver des lignes uniques basées sur plusieurs colonnes

Question

J'essaie de trouver les lignes uniques basées sur plusieurs colonnes, mais mon code ne semble pas fonctionner. Ou au moins, il a réussi à supprimer presque tous les doublons.

1 A 
2 B 
3 C 
1 A 
2 A 
3 B 
2 A 
3 C 
1 C 
1 A 
2 A 
3 B 

C'est le code que j'ai essayé

sort -k1 -k2 TEST.txt | awk -F"\t" '!seen[$1, $2]++' 

Sortie prévue:

1 A 
1 C 
2 A 
2 B 
3 B 
3 C 

Mais la sortie j'obtenir:

1 A 
1 C 
2 A 
2 B 
3 B 
3 B 
3 C 

J'ai encore le double de 3 B dans ma sortie. Quelqu'un peut-il aider? Quelque chose ne va pas avec mon code?

Answer 1

Vous pouvez utiliser sort -u pour trier et obtenir un résultat unique:

sort -u file 

1 A 
1 C 
2 A 
2 B 
3 B 
3 C 

En utilisant awk vous pouvez le faire:

awk '!seen[$1,$2]++' file | sort