我正在编写某种自己的搜索机器人并且遇到问题 - 如何检查网站上的页面是否已刷新?我发现有last-modified
标题代表The last modified date for the requested object
。
我发现没有办法要求最后修改的标题,即它是否已安装。我尝试了If-Modified-Since
标题和If-Unmodified-Since
对面:
`header("If-Modified-Since", "Wed, 26 Mar 2014 06:50:01 GMT")`
,但我感兴趣的大部分网站都返回页面,没有上次修改的错误或304错误。因此,自我的机器人上次访问以来,无法检查其内容是否已被修改。
我错过了什么吗?有没有办法检查页面修改?