如何知道哪个公司保护网站?

时间:2019-09-14 00:10:11

标签: web-scraping

https://www.genecards.org受cloudflare保护。但这从genecards.org的HTML网页上还不清楚。是否有系统地找出许多网站的此类信息?谢谢。

1 个答案:

答案 0 :(得分:1)

触发Cloudflare机器人挑战的简短时间,您可以尝试告诉面向公众的CDN / WAF /一些反机器人服务,如下所示: 做一个NS lookup并查找他们使用的名称服务器/ DNS托管提供商(通常对于Cloudflare客户来说是* .ns.cloudflare.com),或者该名称解析为什么IP。这两种方法都不是100%可靠的,因为这可能只是一个面向公众的外部层,而内部可能会有一个非面向公众的WAF。 IP也可以更改。但这是一个开始。

在这种情况下,对于genecards.org,它实际上不显示Cloudflare,而是基于genecards.org解析的IP地址显示Imperva Incapsula CDN作为外层。快速检查“ CDN”部分中的builtwith即可确认。