乐淘游戏娱乐官网

  •    

当前位置:首页 >  站长 >  搜索优化 >  正文

解除网站Robots封禁全过程

 2018-11-14 21:11  来源:小小课堂SEO自学网 

 

robots协议或者说robots文件对搜索引擎优化中非常重要,但设置出错可能会导致收录下降或不能正常收录。今天,小小课堂SEO自学网带来的是《【robots文件协议】解除Robots封禁全过程》。希望本次的百度SEO优化培训对大家有所帮助。

一、robots被封禁的问题来源

小小课堂SEO自学网为WordPress博客,前几天弄了个“SEO问答”的栏目,是由一个新的CMS系统创建而成的,而这个系统是动态URL,未做伪静态处理。

SEO问答首页的URL:https://www.***.org/ask/

SEO问答栏目的URL:https://www.***.org/ask/?expert/default.html

SEO问答文章列表的URL:https://www.***.org/ask/?c-1.html

SEO问答文章的URL:https://www.***.org/ask/?q-176.html

从上可以看出除了SEO问答首页,其余的都是带问号的,然而,WordPress根目录的robots.txt中包含了以下一条:

Disallow: /*?*

因为这一条的意思是禁止访问网站中所有包含问号(?) 的网址,所以上面的那些带问号的URL就被禁止搜索引擎抓取了。

二、解除Robots封禁全过程

小小课堂SEO自学网解除robots文件协议的全过程如下:

① 去掉robots禁止抓取的规则

也就是去掉Disallow: /*?* 。

② 抓取失败

进入百度站长后台后,点击“数据监控”>“抓取诊断”>输入网址后面的部分,最后点击抓取。

③ 点击“抓取失败”

通过下图可以看出“抓取异常信息:Robots封禁”,点击“网站IP:106.***.***.217”后面的“报错”。略等一会即可。

④ Robots检测并更新

点击检测并更新robots。

以上就是小小课堂SEO自学网带来的是《【robots文件协议】解除Robots封禁全过程》。感谢您的观看。网络营销培训认准小小课堂!SEO培训认准小小课堂!更多seo教程搜索小小课堂。原创文章欢迎转载并保留版权:https://www.xxkt.org/

责任编辑:chenlong666   /   作者:小小课堂SEO自学网

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!

相关文章

  • 看完秒懂robots.txt写法和注意事项

    robots.txt直接放在网站根目录下,是蜘蛛访问网站时,第一个抓取的文件。robots.txt是告诉蜘蛛网站的哪些文件允许抓取,哪些文件不允许抓取,甚至可以指定特定的蜘蛛能不能抓取特定的文件。没有抓取就没有收录,没有收录就没有排名。所以作为第一蜘蛛访问的文件,写好robots.txt是很重要的。

  • 熊掌号必备seo知识1:robots文件

    最近很多站长咨询关于熊掌号的问题,包括熊掌号和传统seo之间的关系等,熊掌号在给网站提供更多的品牌特型、内容保护之外,是否会遵循seo的基础原理呢?曲曲小姐姐将在以后给大家逐一分享。

  • 网站上线前把robots写了所有蜘蛛禁止抓取,取消后还是这样怎么办

    不知道有没有其他站长跟我一样,技术部把网站后台搭建好了,然后网站还是很多东西需要修改的,特别是TDK改了一遍又一遍,但是这时候我没有去百度站长申请闭站保护,却是在网站根目录上传了robots文件,里面写着:User-agent:*Disallow:/这表示我的网站禁止所有蜘蛛来抓取,那么这种情况有什

    标签:
    robots标签
  • 关于如何设置robots.txt文件浅谈

    一个合格的网站,有必要在根目录下包括一下robots.txt文件,这个文件的效果对悉数运营网站的朋友来说并不陌生,网上也供应了很多制作robots.txt文件的方法和软件,可谓恰当便当。可是,你真的知道网站的robots.txt文件设置是不是合理,哪些文件或许目录需要屏蔽、哪些设置方法对网站运营有利

    标签:
    robots标签
  • robots协议对网站、搜索引擎的重要性

    很多站长最头疼的一个问题就是,搜索引擎蜘蛛为什么不光顾自己的网站,或者光顾频率比较低。这样对网站收录的影响是比较大的,直接影响到网站的排名。先谈一下搜索引擎蜘蛛的工作原理吧,蜘蛛又称网络爬虫、网页蜘蛛、网络机器人,更生动的叫网页追逐者。一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些

    标签:
    robots.txt技巧
  • 导致老网站被降权的原因有哪些?

    在互联网迅速发展,网站数据持续增加的今天,打造一款成功的高质量网站并不容易,需要花费大量的心思和时间,然而费尽心思定制维护的老网站,突然被降权,这会令很多的站长都非常的不解,虽说网站被降权在互联网中并不罕见

  • 网站24小时收录小技巧分享

    现阶段互联网同质非常多,导致很多权重比较低的网站收录很慢,甚至不收录,那么今天我们就来简单分析下作为一个新站或者收录很慢的站,如何12小时内快速收录。

  • URL静态化之网站结构优化基础方法

    我们做网站并不是用来试验各种搜素引擎技术和算法的,那些是黑帽和灰帽的事情,对于安安静静只想当白帽,老老实实做大网站的众多站长来说,稳定是排在第一位的,不要轻易尝试任何新兴的东西,步步为营,哪怕慢别人一点,也比冒着风险去当小白鼠强,所以小编在面对URL是否坚持做静态化时持保守的态度。

  • 网站长期不更新能否做到SEO优化排名稳定?

    不少企业网站从建站公司交付后就没有变动,更没做过SEO优化,所以这些网站也就没有流量,没有排名,甚至搜官网品牌名称都找不到。这是网站本身基础决定的,然而有些网站排名流量稳定,长期不更新会有什么情况呢?

热门排行

创业好项目

信息推荐

扫一扫关注最新创业资讯