Comment supprimer des entrées effacées de l'index sphinx principal?

Question

J'ai un site qui utilise le schéma d'indexation principal/delta pour le sphinx. La principale est reconstruite tous les jours, le delta est reconstruit toutes les 5 minutes. Cela fonctionne bien pour l'indexation des éléments nouvellement soumis. Le problème est que les éléments doivent être supprimés de l'index aussi souvent qu'ils sont ajoutés, et généralement les éléments supprimés sont plus anciens, ils résident donc déjà dans l'index principal. Ainsi, après la suppression de l'élément, ils apparaissent toujours dans les résultats de la recherche jusqu'à 24 heures (jusqu'à 1 heure du matin lorsque la fonction principale est reconstruite).

Comment puis-je résoudre ce problème?

Answer 1

Sphinx a récemment introduit une fonctionnalité d'indexation en temps réel, dans laquelle vous pouvez ajouter, mettre à jour et supprimer des index à la volée. Cependant, il est seulement disponible en 1.10, et semble encore assez cru.

http://www.sphinxsearch.com/docs/current.html#rt-indexes

Sinon, vous pouvez complète réindexer plus souvent. Toutes les 24 heures semblent longues, si vous avez beaucoup de suppressions. En dernier recours, vous pouvez toujours vérifier dans votre application que les ID renvoyés existent effectivement, puis les filtrer.

Answer 2

Une option consiste à définir un attribut dans l'index, puis à en modifier la valeur pour «ignorer» certains documents. Par exemple, mes index ont un attribut flag_ignore. Toutes les recherches sont filtrées, de sorte que seuls les documents avec flag_ignore = 0 sont appariés. Lorsqu'un document doit disparaître dès maintenant à partir de l'index, j'appelle Sphinx-> UpdateAttributes() et définissez la valeur sur 1, ce qui fera disparaître le document de toute recherche suivante.

Answer 3

Voir la documentation pour la sql_query_killlist http://sphinxsearch.com/docs/current.html#conf-sql-query-killlist

En bref, vous devez ci-dessous dans l'index delta:

sql_query_killlist = select id from mytable where updated > @last_delta_update