J'ai un ensemble d'araignées Scrapy. Ils doivent être exécutés quotidiennement à partir d'une application de bureau. Quelle est la manière la plus simple (du point de vue de l'utilisateur) de l'installer et de l'exécuter sur une autre machine Windows?Comment intégrer un script Scrapy dans une application autonome?
Le courir les araignées moyen le plus simple est d'écrire un script en python pour eux, je suppose ...
Si vous utilisez Windows Server, vous pouvez même programmer le COMAND que vous utilisez (scrapy crawl yoursprider).
Créez un script (par exemple run_spider.py) qui exécute scrapy crawl <spider_name> en tant que commande système.
run_spider.py
from os import system
output_file_name = 'results.csv'
system('scrapy crawl myspider -o ' + output_file_name + ' -t csv')
Ensuite, ce script se nourrissent à PyInstaller:
pyinstaller run_spider.py