我有1000个URL的列表,其中的ID格式如下: 酒店/威基基海滩; HNL41184 并且“; HNL41184”是ID“;”是分隔符。
现在,我尝试发送带有x-robots标签指令的http标头:
<IfModule mod_headers.c>
<Files ~ "\;HNL41174$">
Header set Cache-Control "max-age=0, no-cache, no-store, must-revalidate"
Header set Pragma "no-cache"
Header set X-Robots-Tag "noindex, follow"
</Files>
这是正确的吗?还是有更好的方法来到达traget?