Quel est le meilleur moyen de récupérer des fichiers journaux plats à partir d'un grand nombre de serveurs et de les ramener tous à un emplacement central?

Question

Ce sont des fichiers au format texte, supprimés par des lignes, écrits par des applications comme mysql ou apache, qui sont hors de mon contrôle.

Answer 1

S'ils sont tous en réseau et sur le même domaine; créez un dossier partagé et demandez aux programmes de générer leurs fichiers journaux dans ce dossier.

Answer 2

Vous voudrez peut-être vérifier Splunk ou Q Radar les deux produits qui rassemblent les fichiers journaux à partir de nombreux emplacements et les rendent consultables.

Answer 3

Cela dépend vraiment de ce que vous êtes à l'aise de travailler.

Vous pouvez effectuer cette tâche avec tout ce qui va des scripts (bash, perl, .bat, etc.) aux programmes compilés que vous écrivez à divers produits (Splunk et Q Radar ont été mentionnés par tschaible) ou même quelque chose comme Microsoft SSIS . Difficile d'en dire beaucoup plus jusqu'à ce que nous sachions quelles plates-formes/langues/etc vous aimez utiliser.

Il est fort probable que vous utilisiez FTP comme dénominateur commun le plus bas pour extraire les fichiers des différents serveurs. Il peut être utilisé par toutes les options que j'ai mentionnées.

Il semble que vous souhaitiez les placer dans une base de données afin de les rendre consultables.

Vous pourriez probablement obtenir une meilleure réponse si vous ajoutez plus de détails à votre question.

Espérons que cela aide.