Numéro d'horodatage delta-import SOLR

Question

Je suis nouveau à SOLR et je faisais des recherches sur cette technologie. J'ai maintenant une question concernant la fonction delta-import donc j'ai regardé SO et trouvé ceci: Solr DataImportHandler delta import. Dans la réponse, il y a un champ [date_update] mentionné qui semble être un horodatage de l'enregistrement.

Ma question est: Est-ce que [date_update] est un horodatage stocké dans la table lors de la création de l'enregistrement? Si oui, cela ne peut-il pas créer de problèmes si la date du serveur de base de données n'est pas exactement synchronisée avec le serveur sur lequel SOLR est installé? Cela pourrait exclure certains enregistrements si l'heure du serveur Solr est antérieure à SQLServer.

Answer 1

Cette solution peut laisser des traces (si les serveurs ne sont pas configurés correctement). J'utilise une solution similaire mais avec quelques modifications. Les éléments de la base de données ont un champ d'horodatage mis à jour lorsque l'élément change de quelque façon que ce soit.

Avant de mettre à jour l'index je reçois la dernière timestamp à partir Solr (ce champ est stocké), alors je passe cet horodatage dans la requête index Solr (/? = Commande import complet & propre = false & timestamp =. ..).

Using query attribute for both full and delta import

que le temps de façon sur la machine Solr ont rien à voir avec le temps sur la machine DB. Cependant, dans mon cas, une fois l'indexation terminée, j'effectue une vérification rapide avec la base de données (la vérification est quelque chose qui manque pour une raison quelconque, ou quelque chose doit être effacé).

Vous pouvez également utiliser ce type de vérification lorsque vous utilisez dataimporter.last_index_time.

Answer 2

Vous pouvez utiliser FlexCDC, qui surveille le journal binaire pour les données de table changements:

http://www.mysqlperformanceblog.com/2011/03/25/using-flexviews-part-two-change-data-capture/