使用Open Search Server爬网受STS保护的站点

Question

我已配置Open Search Server，它适用于所有开放网站。但我无法抓取使用Security Token Service (STS)进行身份验证的受保护网站。我已为Web爬网程序指定了所有身份验证参数（模式，用户名和密码），但它没有抓取。

如何使用Open Search Server网络抓取工具抓取受STS保护的网站？

Answer 1

OpenSearchServer的身份验证模块支持以下协议：

• 基本HTTP身份验证
• 摘要HTTP身份验证
• 的Kerberos

可以开发附加实现。作为开源软件，您可以通过OpenSearchServer SourceForge project进行贡献或向社区寻求帮助。