Optimisation de grep (ou utilisation d'AWK) dans un script shell

Question

Dans mon script shell, j'essaie de rechercher à l'aide des termes trouvés dans un fichier source $ par rapport au même fichier $ target, encore et encore.

Mon sourcefile $ est formaté en tant que tel:

pattern1 
pattern2 
etc... 

La boucle inefficace, je dois chercher avec est:

for line in $(< $sourcefile);do 
    fgrep $line $targetfile | fgrep "RID" >> $outputfile 
done 

Je comprends qu'il serait possible d'améliorer ce soit par le chargement de l'ensemble $ targetfile en mémoire, ou peut-être en utilisant AWK?

Merci

Answer 1

Ai-je raté quelque chose, ou pourquoi pas juste fgrep -f "$sourcefile" "$targetfile"?

Answer 2

Une solution sed:

sed 's/\(.*\)/\/\1\/p/' $sourcefile | sed -nf - $targetfile

Ceci transforme chaque ligne de $ sourcefile à une commande de correspondance de motif sed:

matchstring

à

/matchstring/p

Vous auriez besoin d'échapper à des caractères spéciaux pour faire cela, cependant robuste,.

Answer 3

Utiliser awk pour lire dans le sourcefile puis la recherche dans targetfile (non testé):

nawk ' 
    NR == FNR {patterns[$0]++; next} 
    /RID/ { 
     for (pattern in patterns) { 
      # since fgrep considers patterns as strings not regular expressions, 
      # use string lookup and not pattern matching ("~" operator). 
      if (index($0, pattern) > 0) { 
       print 
       break 
      } 
     } 
    } 
' "$sourcefile" "$targetfile" > "$outputfile" 

Est-ce également avec gawk.