如何使用Jinja2作为Scrapy扩展发送电子邮件

时间:2017-01-02 09:48:15

标签: web-scraping scrapy jinja2 scrapy-spider premailer

您是否知道或有一个如何使用Jinja2Premailer作为Scrapy扩展程序创建和发送电子邮件的示例?

如果我不能将它们与Scrapy一起使用,您建议使用其他HTML模板解决方案发送高级电子邮件吗?

1 个答案:

答案 0 :(得分:1)

您绝对可以发送包含Scrapyjinja2的电子邮件。我们一直这样做,以便从我们的刮刀中收到警报。我们使用mandrill发送电子邮件,但您可以使用其他任何SMTP提供商发送电子邮件。您也可以扩展此代码以在模板中实现premailer

import requests
from scrapy import signals
from jinja2 import Environment, PackageLoader

class EmailExt(object):
    """
    Email extension for scrapy
    """

    @classmethod
    def from_crawler(cls, crawler):
        """
        On `spider_closed` signal call `self.spider_closed()`
        """
        ext = cls()
        crawler.signals.connect(ext.spider_closed,
                                signal=signals.spider_closed)
        return ext

    def spider_closed(self, spider, reason):

        #initialize `PackageLoader` with the directory to look for HTML templates
        env = Environment(loader=PackageLoader('templates', 'emails'))

        template = env.get_template("email-template.html")

        # render template with the custom variables in your jinja2 template
        html = template.render(title="Email from scraper", count=10)

        # send the email using the mandrill API
        requests.post('https://api.mailgun.net/v3/yourcompany/messages',
                      auth=('api', 'API-KEY-FOR-MANDRILL'),
                      data={'from': 'support@gmail.com',
                            'to': 'myemail@gmail.com',
                            'subject': 'Email from scraper',
                            'html': html})