在动态生成表时,如何使用Python BeautifulSoup查看表信息?

时间:2018-04-10 05:29:04

标签: javascript python beautifulsoup python-requests

我试图在不使用雅虎或纳斯达克的情况下获取收入日历信息,因为它们并不总是准确的。

Bloomberg的网站上有以下网址的收入信息: https://www.bloomberg.com/markets/earnings-calendar/us

当我检查页面的html源代码时,我找到了控制日期选择日历工具的html代码块,并检查了我标记为EV#1,EV#2,EV#3的一些事件代码和EV#4作为参考。

<div data-view-uid="1|0_5_9_1"> <----EV#1
    <div class="date-picker">  <--EV#2
        <input id="datepicker" value="04/10/2018" class="hasDatepicker" type="text"> <--EV#3
        <button type="button" class="ui-datepicker-trigger">button</button> <----EV#4
    </div>
</div>

我发现每个EV#n事件都引用了一些处理点击事件的jQuery代码。

当我在每个EV#n的Web检查器中突出显示与事件相关的工具箱时,我会看到使用JQuery或Bubbling,DOM2的代码描述。

我不知道这些意思是什么,但也许在这个阶段并不那么重要。我已经包含了描述以及哪些EV#对应于下面的代码。也许它很有帮助..

JQuery:(EV#1)

tellMeTheSelectedDate: function() {
r.locale(this.locale);
var e = this.$datePicker().datepicker("getDate"),
t = r(e).format("L");
a.log(t)
} 

冒泡,DOM2 :( EV#1,EV#2,EV#3,EV#4)

function An(e) {
  if (Gi) {
    var t = Cn(e);
    if (t && this.id == t.id) {
      var n = In(t);
      if (n && kn(e)) {
        var r = Rn(n);
        r.PX263 = d(t), re("PX217", r), ji++, Fi <= ji && (Gi = !1, Dn(!1))
      }
    }
  }
}

冒泡,DOM2 :( EV#1,EV#4)

u = b.handle = function(e) {
return typeof d === R || e && d.event.triggered === e.type ? void 
0 : d.event.dispatch.apply(u.elem, arguments)
}

jQuery:(EV#4)

function() {
return e.datepicker._datepickerShowing && 
e.datepicker._lastInput === t[0] ? e.datepicker._hideDatepicker() 
: e.datepicker._datepickerShowing && e.datepicker._lastInput !== 
t[0] ? (e.datepicker._hideDatepicker(), 
e.datepicker._showDatepicker(t[0])) : 
e.datepicker._showDatepicker(t[0]), !1
}

目标:

我没有使用JQuery的经验,但我知道它使用CSS描述符来动态改变Web内容。

我是否可以使用请求并通过修改日历工具中存储此值的任何变量将“选择日期”(日期字符串)发送到日期选择小部件,以便页面刷新(这是正确的吗?)并根据我通过脚本传递的日期在表格中显示收入信息?

我是否需要模拟“点击”事件才能让我的日期更新页面?

使用bs4从表中获取数据没有问题,但我的主要问题是日期选择。

提前致谢

1 个答案:

答案 0 :(得分:3)

如果您在浏览器中打开开发人员工具(F12)并转到网络选项卡,则可以在更改日历上的日期时嗅出页面发出的请求。这样,您可以将您喜欢的任何日期作为URL参数传递:

https://www.bloomberg.com/markets/api/calendar/earnings/US?locale=en&date=2018-04-30