标签： web google-chrome-extension web-scraping
我正在尝试刮擦此website。当我尝试翻页时
https://timesofindia.indiatimes.com/topic/Hiv/news/1 https://timesofindia.indiatimes.com/topic/Hiv/news/2等。
我发现我已被重定向回起始网址
https://timesofindia.indiatimes.com/topic/Hiv/news/
由于我使用的是chrome扩展程序 Web Scraper ，因此我无法通过发送cookie来测试会话的响应。我猜这可能是通过页面获取的某些存储变量。如果使用扩展名可以解决该问题，请告诉我。