Question

在How to combine scrapy and htmlunit to crawl urls with javascript的问题中，建议使用带scrapy的webkit来浏览javascript。但是，example Snipplr snippet说：

import gtk
import webkit
import jswebkit

我是Python新手。根据我的理解，webkit（用C / C ++编写）需要有Python包装器。我环顾四周但找不到那样的东西。任何建议表示赞赏。

Answer 1

这是你可以从这里开始的最简单的例子

import gtk 
import webkit 

view = webkit.WebView() 

sw = gtk.ScrolledWindow() 
sw.add(view) 

win = gtk.Window(gtk.WINDOW_TOPLEVEL) 
win.add(sw) 
win.show_all() 

view.open("http://w3.org/") 
gtk.main()

您可以从此处了解详情http://code.google.com/p/pywebkitgtk/ 还看看这里 http://dvlabs.tippingpoint.com/blog/2011/11/28/malicious-content-harvesting

如何在scrapy / python中使用webkit代码

1 个答案: