标签: ajax google-app-engine gwt htmlunit web-crawler
所以我的问题其实非常简单:
如果我放webclient.setCssEnables(false),那么它应该更快,对吧?谷歌会认为它是隐形眼镜吗? (如果您不知道隐藏真实内容,隐藏真实内容会向用户显示不同的内容,您将向Google bot或任何其他机器人显示)
webclient.setCssEnables(false)
答案 0 :(得分:3)
HtmlUnit是一个Web浏览器。为什么Google会关注您在网络浏览器中启用或禁用CSS?在HtmlUnit中启用CSS不会改变Web服务器所服务的内容。