我正在寻找一个供我个人使用的免费站点地图生成器 - 而不是发送给谷歌。
一些信息极佳的网站可能设计得很糟糕 - 就像一个迷宫。对于这些网站,我想创建一个站点地图,列出我感兴趣的所有页面,然后使用该网站自己的链接访问我可能错过的页面。
大多数免费生成器都有页面限制。但是一些网站 - 例如金融网站 - 将大大超过限制。
所以,对于这些网站,我想进入第二级,并且只要求#34; Pensions"或仅限"投资",并忽略所有其他金融产品。这些网站可能包含以下网址:
www.financial_site.com/pensions
如果有这样的工具,我将不胜感激任何链接。
答案 0 :(得分:-1)
A1 Sitemap生成器(不是免费的,但试用期为30天)允许设置根目录以斜杠结尾,其他开始抓取路径和URL限制为“限制”+“排除”过滤器(可以使用正则表达式)