我正在为用户开发一个电子邮件/ Instagram抓取机器人。 机器人应该在谷歌上执行搜索，然后访问从每次搜索中检索到的许多网页。
我通常会使用HTTP请求，但考虑到这种情况，需要一个带脚本解释器的完整浏览器。
问题是WinForms中的内置Web浏览器控件，以及CefSharp只是启动外部浏览器
慢（加载检索简单HTML不需要的所有东西）
内存密集型（不能同时运行100个实例）
不可独立配置（人们希望同时运行30个实例，每个实例通过不同的代理，甚至将每个导航的代理更改为新的URL，例如。）
那么什么是最佳解决方案？