Supprimer de la table avec des millions d'enregistrements

Question

J'essaie de trouver un moyen de faire un DELETE conditionnel sur une table InnoDB qui contient des millions d'enregistrements, sans le verrouiller (donc ne pas mettre le site web en panne).

J'ai essayé de trouver des informations sur mysql.com, mais en vain. Des conseils sur la façon de procéder?

Answer 1

Je ne pense pas qu'il soit possible de supprimer sans verrouillage. Cela dit, je ne pense pas que le verrouillage du dossier que vous voulez supprimer soit un problème. Ce qui poserait un problème est le verrouillage d'autres lignes.

J'ai trouvé quelques informations sur ce sujet ici: http://dev.mysql.com/doc/refman/5.0/en/innodb-locks-set.html

Ce que je suggère, est d'essayer de faire un million supprime seule ligne. Je pense que si vous faites tout cela en une seule transaction, la performance ne devrait pas trop nuire. de sorte que vous obtiendrez quelque chose comme:

START TRANSACTION; 

DELETE FROM tab WHERE id = 1; 
.. 
.. 
DELETE FROM tab WHERE id = x; 

COMMIT; 

Vous pouvez générer les statments nécessaires en faisant quelque chose comme

SELECT CONCAT('DELETE FROM tab WHERE id = ', id) 
FROM tab 
WHERE <some intricate condition that selects the set you want to delete> 

donc l'avantage sur cette méthode au lieu de faire:

DELETE FROM tab 
WHERE <some intricate condition that selects the set you want to delete> 

est que dans la première approche, vous ne verrouillez que l'enregistrement que vous supprimez, alors que dans la seconde, vous risquez de bloquer d'autres enregistrements qui se trouvent dans la même plage que la ligne s vous supprimez.

Answer 2

Si cela correspond à votre application, vous pouvez limiter le nombre de lignes à supprimer et configurer un cronjob pour répéter la suppression. E.g .:

DELETE FROM tab WHERE .. LIMIT 1000 

J'ai trouvé que c'était un bon compromis dans un scénario similaire.