BeautifulSoup导出多个页面导致1个csv文件

时间:2019-05-17 17:47:04

标签: python beautifulsoup

我尝试学习一些Python和BeautifulSoup,并且在尝试将多个页面的结果导出到csv文件中时遇到问题。 我只是在获取首页的结果。

我将所有结果放入DataFrame中 将索引更改为id 并导出到csv

非常感谢您的帮助

    import pandas as pd
    dataset = pd.DataFrame({ 'id': data, 'link': link})
    dataset.set_index('id', inplace=True)
    dataset.to_csv('export1.csv', header=True, index=True, encoding='utf-8',)

这是终端上的输出, 在CSV上,我只有首页结果(前14行)

                                                       link
id                                                         
56473965  https://fr.xxx.com/p56473965-appartem...
56468485  https://fr.xxx.com/p56468485-appartem...
etc....
                                                       link
id                                                         
68414645  https://fr.xxx.com/p68414645-appartem...
71750523  https://fr.xxx.com/p71750523-hotel-pa...
etc....
                                                       link
id                                                         
67764225  https://fr.xxx.com/p67764225-appartem...
61756105  https://fr.xxx.com/p61756105-loft-en-...
etc....

0 个答案:

没有答案