标签： python security scrapy
我目前正在尝试使用Scrapy框架清除从各种用户Web访问日志中获取的URL。 我的蜘蛛唯一要抓的是“标题”中的信息。元标记和关键字＆＃39;每个网址的元标记。没有pdf，csv，txt等的下载
我是否应该关注爬虫在爬行时下载病毒？如果没有，为什么？