当前位置:首页 > robots

如何写robots规则屏蔽类似页面?

2021-01-142610
如何写robots规则屏蔽类似页面?
一、若有共性,就按照共性规则屏蔽,比如所有需要屏蔽的URL都是以下这类型是,且这类URL中不含有不需要屏蔽的URL则: Disallow: /site-yuyue-若无共性,也就是说上面这类URL中...

网站改版后只收录改版前的url,其他的没收录

2021-01-092050
网站改版后只收录改版前的url,其他的没收录
一、百度适应新站是需要时间的,本来搜索引擎对你的网站信任度就不高! 删除再上传程序这事情就如从头再来。 1、做好404页面提交给给百度了吗? 2、耐心做好内容,要让百度接受你,也要有接受你的理由 3...

为什么上传了robots.txt百度还会收录

2021-01-082050
为什么上传了robots.txt百度还会收录
一、给百度提交一下,很大可能是你虽然更新了robots,百度没有及时更新。二、百度站长后台手动更新一下robots文件。 在百度站长平台投诉一下,说robots没有生效...

网站二级目录下的单页一直不收录,怎么解决?

2021-01-042180
网站二级目录下的单页一直不收录,怎么解决?
一、多发高质量原创,增加外链,为蜘蛛提供更多进入接口。可以考虑添加sitemap二、站内下手吧,把内容丰富丰富,关键是内链,一定要做好,那样的话能明显提高收录量的,至于具体怎么做 百度一下,内链如何...

一站多用robots.txt,会有那些影响

2021-01-032120
一站多用robots.txt,会有那些影响
一、不可以。 主站和二级域名不能通用robots的,应放到各自的根目录下。参考@百度站长平台官方 的说明:robots.txt文件放在哪里?二、但如果在二级域名里,蜘蛛是通过 的路径来访问的。...

如何设置robots协议,屏蔽蜘蛛抓取URL后面的红色

2020-12-313460
如何设置robots协议,屏蔽蜘蛛抓取URL后面的红色
一、还可以屏蔽一段?要屏蔽就整个地址屏蔽掉了 还是老老实实改模板吧,不然url太乱后期搞死自己二、可以屏蔽,但事先先找下原因,这些地址是从哪里过来的,另外你写的屏蔽规则不对,我用手机回答你的,不好编...

关于robots的问题

2020-12-282080
关于robots的问题
一、如果你要屏蔽带 % 的链接,你这样屏蔽: Disallow: /?%? 二、如果想屏蔽动态的url 请使用Disallow:/?三、? 是代表任意字符的意思 意思是前后任意字符 里面含有% 就屏...

网站robots设置没有问题,但是一直提示有问题,网站不收录

2020-12-283940
网站robots设置没有问题,但是一直提示有问题,网站不收录
一、你是不是把所有内容都放在设置的robots.txt里面了 如果没有,你的网站以前是不是有违规 如果设置没错,也没有违规,给网站做些外链,应该很快就会收录了。二、先设置一个空的试试,要不你再百度站...

为什么顶级域名和二级域名的robots内容不一样?

2020-12-242080
为什么顶级域名和二级域名的robots内容不一样?
一、这个问题好奇怪 既然都301到www上面了,何来不带www的页面...

怎样让友链页面不收录

2020-12-192700
怎样让友链页面不收录
一、友情链接页面中的外链就算是获取权重,也是获取的你这个页面的权重,而不是全站的权重。所以你禁止不禁止百度抓取,对你来讲都是一样的。二、加rel="nofollow"标签告诉搜索引擎这个页面不需要权...