我在ubuntu服务器上使用splash
并按照说明安装docker(https://github.com/scrapy-plugins/scrapy-splash)。
docker run -p 8050: 8050 scrapinghub / splash
如何更改设置并设置用户名和密码?
答案 0 :(得分:0)
最简单的方法是将Aquarium与Query 1 : SELECT oid, typname, typelem, typdelim, typinput FROM pg_type
Query 2 : SELECT a.attname, format_type(a.atttypid, a.atttypmod),
pg_get_expr(d.adbin, d.adrelid), a.attnotnull, a.atttypid, a.atttypmod
FROM pg_attribute a LEFT JOIN pg_attrdef d
ON a.attrelid = d.adrelid AND a.attnum = d.adnum
WHERE a.attrelid = ?::regclass
AND a.attnum > ? AND NOT a.attisdropped
ORDER BY a.attnum
和{
"code" : 503,
"errors" : [ {
"domain" : "global",
"message" : "Backend Error",
"reason" : "backendError"
} ],
"message" : "Backend Error"
}
选项一起使用。
答案 1 :(得分:0)
在集成Aquarium-Splash和Scrapy时,可以根据Scrapy的official documentation使用scrapy crawl
选项在-a
下传递用户名和密码。