Scrapy可以在我的自定义桌面应用程序中实现吗,在该应用程序中,它可以自动在网页列表上进行抓取过程并将其作为表格导出到数据库中?
答案 0 :(得分:1)
是的,可以。我已经通过python,PYQT5,scrapy和Database做了同样的事情。
1. Create the application frontend using Pyqt5(GUI,Designer option available ).
2. Create scrapy project and run the spider via python script scrapy call.
If you are deploying the spider in any services, use the service API call.
3. Check the database connectivity in the frontend itself.
if it succeeds, save the spider response to the corresponding database.
4. Use pyinstaller or py2exe to convert the code to a standalone executable.
答案 1 :(得分:0)
是的,如果您使用的是scrapy
python
,请抓取网页并将所需的数据存储到所需的任何数据库中,然后定期从数据库中选择数据并将其显示在桌面中应用程式。桌面应用可以是任何框架或语言。