使用if语句通过Xpath获取数据

时间:2018-11-07 01:10:37

标签: php web-scraping

我有三个URL,这些URL具有所需的数据。但是每个数据都在不同的html标签中。这就是为什么我不能为所有人提供相同的Xpath。我需要尝试“如果找不到此Xpath,请尝试一下”。像这样但是我对如何做到这一点感到困惑?

例如,以下是链接$linkBox

array(3) {
  [0]=>
  string(34) "https://lions-mansion.jp/MF161026/"
  [1]=>
  string(34) "https://lions-mansion.jp/MF171045/"
  [2]=>
  string(34) "https://lions-mansion.jp/MF171010/"
  }

我要一一进入这些链接。而对于第一个。我正在给Xpath:

$get = [];
    foreach ($linkBox as $box){
        $content = pageContent($box);
            $Pars = new \DOMXPath($content);
            $Route = $Pars->query("//ul[@id='snav']/li/a");
            foreach ($Route as $Rot){
                $get = $Rot->getAttribute('href');
            }

    }

但是Xpath不适用于第二个或第三个。因此,如果有if语句,如果它为null,该如何写呢?像一个代码?我能做到吗?还是我需要使用其他方式?

第二个Box的Xpath是:

 $Route = $Pars->query("//nav[@id='siteActionNav']ul/li/a");

第二个Box的Xpath是:

 $Route = $Pars->query("//ul[@id='subNavi']/li[2]/a");

1 个答案:

答案 0 :(得分:0)

您可以做的是尝试每个XPath表达式,看看它是否返回任何元素。

例如,这是一个依次测试每个表达式的函数,如果发现匹配项,则返回DOMNodeList,否则抛出异常...

function findLinks(\DOMXPath $xp) {
    $queries = [
        '//ul[@id="snav"]/li/a', 
        '//nav[@id="siteActionNav"]ul/li/a', 
        '//ul[@id="subNavi"]/li[2]/a'
    ];
    foreach ($queries as $query) {
        $links = $xp->query($query);
        if ($links->length > 0) {
            return $links; // exits the function and returns the list
        }
    }
    throw new \RuntimeException('No links found');
}

然后您可以像这样使用

foreach ($linkBox as $box){
    $content = pageContent($box);
    try {
        $links = findLinks(new \DOMXPath($content));
        foreach ($links as $link){
            $get[] = $link->getAttribute('href'); // note: changed to a push
        }
    } catch (\Exception $e) {
        echo "Problem with $box: " . $e->getMessage();
    }
}