XML xpath recherche et mise en boucle de tableaux avec php, problème de mémoire

Question

J'ai affaire à de gros fichiers XML (plusieurs mégaoctets) pour lesquels je dois faire différents types de vérifications. Cependant, j'ai un problème avec la mémoire et l'utilisation du temps qui se développe très rapidement. Je l'ai testé comme ceci:

$xml = new SimpleXMLElement($string); 
$sum_of_elements = (double)0.0; 

foreach ($xml->xpath('//Amt') as $amt) { 
    $sum_of_elements += (double)$amt; 
} 

Avec microtime() et memory_get_usage() -functions je reçois les résultats suivants en exécutant ce code:

• fichier 5Mo (7480 Amt-éléments):
  • temps d'exécution 0,69s
  • utilisation de la mémoire se développe à partir 10.25Mb à 29.75Mb

C'est encore tout à fait correct. Mais avec un peu plus la mémoire de fichiers et l'utilisation du temps se développer très bien:

• fichier 6Mo (8976 Amt-éléments):
  • temps d'exécution 8,53s
  • Utilisation de la mémoire se développe à partir 10.25Mb à 99.25Mb

le problème semble être en boucle le jeu de résultats. J'ai aussi essayé for-loop au lieu de foreach mais sans différence. Sans boucler l'utilisation de la mémoire ne se développe pas tellement.

Une idée où le problème pourrait être?

Answer 1

SimpleXML est basé sur l'arbre et chargera tout le document en mémoire. En utilisant unset pour marquer les ressources non nécessaires pour PHP's GC pour le nettoyage pendant une boucle might yield less memory usage. Si cela ne résout pas le problème, pensez à utiliser XMLReader pour une approche par extraction. Bien que vous ne puissiez pas utiliser XPath, la consommation de mémoire devrait être nettement inférieure.