从具有相同类名的多个表单元格中读取文本

时间:2018-09-03 07:02:04

标签: javascript node.js web-scraping cheerio

我需要从网站上抓取特定信息。列出的是其他人,而html对于1个人来说是这样的:

<table class="novip">
        <tbody><tr class="novip">
          <td class="novip-portrait-picture" rowspan="5">
            <a class="novip-portrait-picture" href="###">
              <img class="novip-portrait-picture" src="/img/general/default/portrait/cat/default-portrait_m.jpg" alt="Noch kein Bild" onerror="portrait_m_image_failover(this)">
            </a>
          </td>
          <td class="novip-left">
            <a class="novip-firmen-name" href="###" target="_top">
              Dubler&nbsp;Martin
            </a>
          </td>
          <td class="novip-right" rowspan="2">
            <a class="novip" href="/arzt/dubler-martin-bad-zurzach-5330-arzt.html">
              <img class="novip-right" src="/pictures/31814/web/small/31814.png">
            </a>
          </td>
        </tr>
        <tr class="novip">
          <td class="novip-left">
            <span class="novip-left-titel">
              Dr. med. 
            </span>
            <span class="novip-left-fachbezeichnung">
              Facharzt FMH für Allgemeinmedizin, Reiseme
              <a class="novip-left-fachbezeichnung" href="/arzt/dubler-martin-bad-zurzach-5330-arzt.html">
                ...
              </a>
            </span>
            <br>
            address...
            <br>
            Tel:&nbsp;056 249 27 77
            &nbsp;&nbsp; 
        </td></tr>       
      </tbody></table>

我需要novip-firmen-namenovip-left-titelnovip-left-fachbezeichnung类中的文本。

我尝试了以下操作:

request('url', (error, response, html)=>{
if(!error && response.statusCode == 200){
    const $ = cheerio.load(html);

    $('table .novip').each(function(i, value){

        var fullname = $(value).find('.novip-firmen-name').text();
        console.log(fullname);

        var link = $(value).find('.novip-firmen-name').attr('href');
        console.log(link);

        var title = $(value).find('.novip-left-titel').text();
        console.log(title);

        var fachbezeichnung = $(value).find('.novip-left-fachbezeichnung').text();
        console.log(fachbezeichnung);

        console.log('----------------------------------');

    }); 


}
else console.log("error");
});

它似乎可以正常工作,但有时出于某种原因它未定义。我也觉得有一种更简单的方法来获取上面列出的信息。我之前从未使用过js和cheerio,因此可以提供任何帮助。谢谢

PS:如果您需要网站链接或更多HTML,请告诉我。

1 个答案:

答案 0 :(得分:0)

您将获得undefined,因为它会为每个表td尝试找到.novip-firmen-nameetc。您要做的就是像这样检查表数据中是否存在这些元素。

$('table .novip').each(function(){
  if($(this).find('.novip-firmen-name').length !== 0) {
    console.log($(this).find('.novip-firmen-name').text());
    console.log($(this).find('.novip-firmen-name').attr('href'));
  }

  if($(this).find('.novip-left-titel').length !== 0){
    console.log($(this).find('.novip-left-titel').text());
  }

  if($(this).find('.novip-left-fachbezeichnung').length !== 0){
    console.log($(this).find('.novip-left-fachbezeichnung').text());
  }

  console.log('----------------------------------');

});