我正在使用硒来刮擦某些网站,但是我需要针对同一域中的特定URL实施此点播。该站点需要登录,因此我的想法是在以下站点登录一次:www.my_site.com,并在对新站点的请求到达时保持实例运行。
E.G。可以说该网站是linkedin:
1) Load the page
2) Restore the session using the cookies:
3) A request for the profile arrives: christian-tutiven
4) Wait for a new request to arrive.
这如何在硒或类似工具上完成?
编辑:
(与其他网站一起)的目的是将其作为API。 在我的服务(站点A)上,有人请求,以便在LinkedIn(B侧)上查看“ Carlos”的完整档案(我将其发送给用户名为selenium的硒,并且selenium应该加载该档案并将数据返回给我)。 我这样做是因为必须登录才能查看完整的配置文件,也不是让每个请求都从头开始的所有过程的选项,因为这将花费太多等待时间。