给出嵌入流的链接列表,我想检查每个流是活着还是死了:
最终目标是一个不显示被破坏的链接的系统,以便电视网站的观众不会浪费时间点击它们。
脚本将用PHP编写,并且每天都会通过cron运行。
该脚本将一次处理大约3000个网址。
这可以以任何方式完成吗?
有哪些方法可以做到这一点?
您是否了解使用任何语言编写的任何脚本?
感谢您抽出宝贵时间回复或提供任何帮助。
答案 0 :(得分:0)
要检查链接是死还是活,你可以使用套接字,curl,file_get_contents - 任何东西,它取决于你期望的信息类型(链接一般是活着的,它是否提供代码200而不是404/503 /等) ,页面是否包含一些特定数据。)
要同时运行多个请求,您可以尝试分拣检查脚本,或者只使用某种队列服务器(例如RabbitMQ)。