HTML Agility Pack Xpath无法正常工作

时间:2018-08-10 17:06:54

标签: c# parsing xpath html-agility-pack nullreferenceexception

因此,当我尝试执行操作时,是使用HTML Agility Pack解析HTML文档。我加载了html文档,并且可以正常工作。问题出在我尝试使用XPath进行解析时。我收到“ System.NullReferenceException:'对象引用未设置为对象的实例。'”错误。

要获取我的xpath,请使用“ Chrome开发”窗口并突出显示整个表,该表的行包含要解析的数据,右键单击它并复制Xpath。

这是我的代码

string url = "https://www.ctbiglist.com/index.asp";
        string myPara = "LastName=Smith&FirstName=James&PropertyID=&Submit=Search+Properties";
        string htmlResult;

        // Get the raw HTML from the website
        using (WebClient client = new WebClient())
        {
            client.Headers[HttpRequestHeader.ContentType] = "application/x-www-form-urlencoded";

            // Send in the link along with the FirstName, LastName, and Submit POST request
            htmlResult = client.UploadString(url, myPara);

            //Console.WriteLine(htmlResult);
        }

        HtmlDocument doc = new HtmlDocument();
        doc.LoadHtml(htmlResult);


        HtmlNodeCollection table = doc.DocumentNode.SelectNodes("//*[@id=\"Table2\"]/tbody/tr[2]/td/table/tbody/tr/td/div[2]/table/tbody/tr[2]/td/table/tbody/tr[2]/td/form/div/table[1]/tbody/tr");

        Console.WriteLine(table.Count);

当我运行此代码时,它可以工作,但可以获取HTML文档中的所有表。

var query = from table in doc.DocumentNode.SelectNodes("//table").Cast<HtmlNode>()
        from row in table.SelectNodes("//tr").Cast<HtmlNode>()
        from cell in row.SelectNodes("//th|td").Cast<HtmlNode>()
        select new { Table = table.Id, CellText = cell.InnerText };

foreach (var cell in query)
{
     Console.WriteLine("{0}: {1}", cell.Table, cell.CellText);
}

我想要的是一个特定的表,其中包含所有表行,这些行具有要解析为对象的数据。

感谢您的帮助!

1 个答案:

答案 0 :(得分:1)

更改行

from table in doc.DocumentNode.SelectNodes("//table").Cast<HtmlNode>()

from table in doc.DocumentNode.SelectNodes("//table[@id=\"Table2\"]").Cast<HtmlNode()

这只会选择具有给定ID的特定表。但是,如果您嵌套了表格,则需要相应地更改xpath以获得嵌套表格行。