我需要使用htmlagilitypack
的代理。
我提供了我的应用RefURL
的链接。之后,我希望应用程序从代理地址获取URL。例如"101.109.44.157:8080"
我搜索并发现了这个:
WebClient wc = new WebClient();
wc.Proxy = new WebProxy(host,port);
var page = wc.DownloadString(url);
并像这样使用它。
RefURL = new Uri(refLink.Text);
WebClient wc = new WebClient();
wc.Proxy = new WebProxy("101.109.44.157:8080");
var page = wc.DownloadString(RefURL);
RefURL.ToString();
HtmlWeb web = new HtmlWeb();
HtmlAgilityPack.HtmlDocument doc = web.Load(RefURL.ToString());
但它不起作用!
答案 0 :(得分:2)
代理IP没有响应,但您也没有在此代码行中传递Web代理:
HtmlAgilityPack.HtmlDocument doc = web.Load(RefURL.ToString());
应该是:
HtmlAgilityPack.HtmlDocument doc = web.Load(RefURL.ToString(),"GET", webProxy);
第一步是找到"新鲜代理IP"名单。看看这些清单:
这些地址中的大部分都可以使用几个小时。查看how to test proxy ip。一旦你有一个有效的代理IP,你可以创建webProxy对象或只是传递IP和端口。
string RefURL = "https://www.whatismyip.com/";
string myProxyIP = "119.81.197.124"; //check this is still available
int myPort = 3128;
string userId = string.Empty; //leave it blank
string password = string.Empty;
try
{
HtmlWeb web = new HtmlWeb();
var doc = web.Load(RefURL.ToString(), myProxyIP, myPort, userId, password);
Console.WriteLine(doc.DocumentNode.InnerHtml);
}
catch (Exception ex)
{
Console.WriteLine(ex.Message);
}