robots.txt 书写疑问

目前内容页面的首页为 www.xxx.com/t.html ,翻页后为 www.xxx.com/t-#.html (* 为 ID ,# 为页码)。我想要搜索引擎只收录内容页面的首页,而不收录第二页和第三页,那么我在 robots.txt 里写下了如下的规则,请问正确吗?否则应该如何书写?谢谢。

Disallow: /t-*.html
Allow: /t*.html

阅读 2.3k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进