C ++ / PHP中的Web bot

时间:2010-02-25 09:47:53

标签: php c++ robots.txt bots

我最近开始学习PHP,但我对C ++有广泛的了解。我一直在想如何制作一个网络机器人,现在,我非常想制作一个。我不会将这个机器人用于垃圾邮件或任何东西,就像测试PHP / C ++在线可以做什么一样。我想知道如何做到这一点,如果你有任何有用的文章/教程。

谢谢, 约翰

3 个答案:

答案 0 :(得分:2)

快速了解Web Bots的绝佳方法是阅读Michael Schrenk的书“Webbots,Spiders and Screen Scrapers”。这是在PHP / Curl中编写这些东西的完整介绍,它是我遇到的最好的书面和最容易阅读的CS书籍之一。代码可以在配套网站上下载。我现在正在读这本书并且非常喜欢它。

这是网站:http://www.schrenk.com/nostarch/webbots/。由于这本书是从2007年开始的,你甚至可以通过图书馆订购。它也有Kindle版本。

答案 1 :(得分:0)

查看以下内容

提示:在较长的执行时间内,您可能需要查看set_time_limit

答案 2 :(得分:0)

我建议你使用Python,比开发像你想要实现的应用程序更好的C ++。请记住,Web bot / crawler是I / O绑定的,而不是CPU绑定的,因此C / C ++之类的语言与Python之间的性能差异几乎没有。