Comment puis-je supprimer rapidement une valeur de moins de deux caractères d'un grand tableau?

Question

Je souhaite supprimer des valeurs de moins de deux caractères d'un grand tableau contenant 9436065 valeurs de chaîne. J'EFFACÉS preg_grep() en utilisant ce code:

function delLess($array, $less) 
{ 
    return preg_grep('~\A[^qwertyuiopasdfghjklzxcvbnmQWERTYUIOPASDFGHJKLZXCVBNM]{'.$less.',}\z~u', $array); 
} 

$words = array("ӯ","ӯро","ӯт","ғариб","афтода","даст", "ра"); 

echo "<pre>"; 
print_r(delLess($words,2)); 
echo "</pre>"; 

Mais il fonctionne plus lentement. Est-il possible d'optimiser ce code?

Answer 1

compte tenu de la taille de l'ensemble de données, j'utiliser une base de données, il serait probablement ressembler à ceci:

delete from table where length(field) <= 2 

peut-être quelque chose comme sqlite?

Answer 2

Vous pouvez essayer d'utiliser la fonction strlen au lieu des expressions régulières et voir si cela est plus rapide. (Ou mb_strlen pour les caractères multi-octets.)

$newArr = array(); 
foreach($words as $val) 
    if(strlen($val) > 2) 
     $newArr[] = $val; 

echo "<pre>"; 
print_r($newArr); 
echo "</pre>"; 

Answer 3

Je pencherais pour array_filter fonction, la performance devrait être mieux.

function filter($var) 
{ 
    return strlen($var) > 2; 
} 

$newArray = array_filter($array, "filter")); 

Answer 4

Tout travail sur 10 millions de chaînes prendra du temps. À mon avis, ce genre d'opération est un one timer, donc ce n'est pas vraiment important si ce n'est pas instantané.

D'où viennent les cordes? Vous les avez certainement obtenus à partir d'une base de données, si c'est le cas, faites le travail sur la base de données, ce sera plus rapide et au moins vous ne serez jamais pollué avec eux. Ce type d'opération sera plus rapide sur une base de données que PHP, mais pourrait prendre du temps. Encore une fois, si elle est stockée dans une base de données, elle n'est pas arrivée magiquement ... Ainsi, vous pouvez également vous assurer qu'aucune nouvelle entrée indésirable ne s'y trouve, de cette façon vous vous assurez que cette opération n'aura pas besoin d'être refait. Je suis conscient que cela ne répond absolument pas du tout à votre question, car nous devrions nous en tenir à PHP et vous avez le meilleur moyen de le faire ... Optimiser une fonction aussi simple coûterait beaucoup de temps et ne serait pas J'apporte beaucoup d'optimisations ... La seule autre suggestion que je pourrais faire est d'utiliser un autre outil, sinon base de données, basé sur des fichiers comme sed, awk ou tout ce qui lit/écrit dans les fichiers ... Vous en auriez un chaîne par ligne et analyser le fichier en réduisant sa taille en conséquence, mais en écrivant le fichier à partir de PHP, exec le script et charger le fichier en PHP rendrait les choses trop compliquées pour rien ...