从笔记本电脑(IPY或木星)运行抓取抓取工具

时间:2019-05-01 18:18:46

标签: python scrapy web-crawler

我正在尝试创建一个类以从网站上获取一些信息,以实现我正在使用Scrapy的目的。到目前为止,我发现的大多数文档都是关于从.py文件运行它的。我想首先从笔记本(IPY)运行该类。 Stackoverflow中也有类似的问题,但是答案至少对我来说是不对的。

下一个代码只是在笔记本中执行类的基本应用程序:

import scrapy


class spider(scrapy.Spider):
    name = "spider"
    start_urls = [
        "https://coinmarketcap.com/"
                 ]

    def parse(self,reponse):
        product_name = response.css('div.cmc-global-stats span.js-global- 
        stats-cryptocurrencies::text').getall()
        yield {'items':product_name}

如果有人知道从笔记本计算机运行它的方式,或者知道源,链接,书籍或我可以用来了解它的任何东西。

思考

0 个答案:

没有答案