循环浏览搜索结果页并在找到最后一页时暂停

时间:2017-06-02 20:48:41

标签: python beautifulsoup

我似乎无法掌握以下实现技术:

page = '0'

for new_page_num in range(int(page)+120, 100000, 120):
url = 'https://example.com/search/' + str(new_page_num) + 'remainder of url'

print(url.format(new_page_num))

这里我有代码通过它的url模式循环遍历页面,增量为120。

如何让程序在每个页面上执行某些操作,以及如何在程序停止取消结果或我想在那里做任何事情的最后一页时,为程序提供一个里程碑。

我还专门解决了将报废代码放在哪里的问题?代码的哪一部分?

0 个答案:

没有答案