寻找方向以建立在线Web刮板数据库

时间:2019-01-11 19:37:58

标签: python database web-scraping

我想开始使用python进行编码,以建立在线数据库。更具体地说,我想经营一个站点,该站点从其他站点(显然愿意提供其内容)中收集数据,以集中信息。

我以前涉猎编码,并且对编程语言有基本的了解,所以我很好地弄清楚了如何学习变量,类等。我感到困惑的是这一切的概念化以及如何实现。也许我可以概述一下我个人的想法,并且你们可以告诉我这是否有意义:

我想到要托管一个运行django之类的网站,从而可以执行python脚本或一个从其他网站收集信息,切出重要信息然后整齐有序地显示它的应用程序。这也应涉及可搜索的数据库。现在,这是我需要使用SQL的东西吗?还是任何其他数据库编程语言?我以前从未使用过数据库。我还想提供建议选项,以便在您输入一个词时会提供建议。

那么,具有HTML,CSS和JS的网站代码,然后是运行python的django框架,然后是SQL?我希望这是有道理的,至少我现在正在考虑。

我很高兴听到你们在这里是否在考虑正确的用语。另外,如果您能指出合适的资源,我将非常高兴。我进行了一次自我搜索,偶然发现了Automate The Boring Stuff之类的东西,但到目前为止,这确实不符合我要尝试的范围。无论如何,预先感谢您的任何答复! :)

1 个答案:

答案 0 :(得分:0)

您可以订阅PythonWeekly。他们偶尔有关于用python抓取的文章。

例如参见: https://rrighart.github.io/Webscraping/