最新消息:欢迎加入小松的QQ群一起讨论一起学习,本站启用elasticsearch全文检索系统,提供搜索的精确度

百度抓取的链接都是网站不存在的

其他分享 744浏览 0评论

最近从apache访问日志的中发现百度在抓取我的网站的时候有很多404,这些链接一定不是我提供的,不知道链接是怎么产生的
请看图片

apache日志记录百度抓取的链接

导致的结果就是百度站长平台的抓取频次中会发现很多404,如下图

百度站长平台的抓取频次找不到的链接

不清楚会对我的网站产生什么影响

这种的链接还有好多,返回的都是404,我的网站是php的但是有很多后缀为jsp、asp、aspx的链接,对于这种请看,我的处理方法是
1、百度站长反馈中心
我把我的问题提交上去,希望能得到反馈,貌似几率很小,之前反馈的问题都石城大海了

百度站长平台反馈问题
2、roobts屏蔽
在rootbs文件里添加以下代码

Disallow: /*.asp
Disallow: /*.jsp
Disallow: /*.aspx

本我对seo能力有限,只能想到这两不,有别的方法或者思路的朋友请留言

QQ交流群:136351212

如无特别说明,本站文章皆为原创,若要转载,务必请注明以下原文信息:
转载保留版权:小松博客» 百度抓取的链接都是网站不存在的
本文链接地址:https://www.phpsong.com/783.html

发表我的评论
取消评论
表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址
木有头像就木有JJ!点这里按步骤申请Gravatar头像吧!