Nouvelles flux API pour les nouvelles générales

Question

Je construis un outil de base de données + qui scourt les flux de nouvelles pour un certain terme. Par exemple "intoxication alimentaire à partir de noix". Je veux parcourir les sites de médias sociaux, les sites d'information, les principaux agrégateurs de nouvelles, etc ... pour ce terme.

• Question 1: Quelles sont les nouveautés des API d'agrégation?
• Question 2: Comment procéderiez-vous au codage et recevant seulement les dernières nouvelles de l'API?

Modifier Ajouté schématique: alt text http://koopics.com/news_parser.jpg

Answer 1

Connaissez-vous Yahoo! Pipes? C'est un agrégateur de flux très flexible, et vous pouvez le manipuler en utilisant YQL, qui est assez puissant et a une librairie Python, python-yql :). YQL a également des "tables" spécifiques pour Twitter et d'autres services et sources d'informations, donc, selon ce que vous voulez, vous n'aurez peut-être même pas besoin de Pipes.

Il y a un exemple rapide de tuyaux + d'utilisation YQL à http://blog.ouseful.info/2009/04/27/using-yql-with-yahoo-pipes/, mais vous pouvez jouer avec eux au YQL Console.

Donc, c'est votre "Question 1". Mais, en utilisant YQL, « Question 2 » (si je comprends correctement) vient naturellement, comme vous l'utilisez presque comme SQL régulière, imposer des limites, la commande etc.

Answer 2

Google a un fils de nouvelles api mais je pense qu'il est seulement pour un usage non commercial http://www.google.com/support/news/bin/answer.py?answer=59255&hl=en

Answer 3

Si vous avez un soutien financier soutenant votre projet , Reuters a des flux de données de nouvelles que vous pouvez vous abonner sur une base mensuelle.

Answer 4

Avez-vous essayé Universtal Feed Parser ??