如何在phpcrawl中避免循环僵尸陷阱？

Question

如何在使用PHP-crawl时避免陷入循环链接陷阱？

Answer 1

如果您存储了某些阵列中访问过的网址，您可以检查该网址是否已被访问过，如果已经访问过，请不要再次访问该网址。