
刚刚在查询网站收录情况,看到收录的文章很多都是重复的,重复收录是会降低用户体验,重复收录可能会让百度K站
点击链接会进入原网页和评论的链接
https://www.gxsnote.cn/329.html
https://www.gxsnote.cn/329.html/comment-page-1?replyTo=268
comment-page-1?replyTo是评论的链接
解决方法有两种
1.关闭评论分页
2.修改robots.txt,加入禁止引擎抓取评论分页链接
Disallow: /*/comment-page-*?replyTo=*
如果根目录下没有robots.txt,自行创建一个
最后更新 2023-02-21