• 以朝鲜民主主义人民共和国为例,难道特金会是由朝鲜工人、农民主导的?[哈哈] 2019-08-20
  • 安徽省直机关领导干部宪法学习宣传报告会br暨“省直机关大讲堂”第四十四讲在肥举办 2019-08-20
  • 人民网驻汕头记者报道集 2019-08-19
  • 以仪式守护节日文化--旅游频道 2019-08-19
  • 这个帖子,本人已经驳斥多次了。共产主义不是不能实行按劳分配,而是不需要实行按劳分配。共产主义时代,产品极大丰富,所以实行按劳分配是多余的,好比脱裤子放屁!... 2019-08-11
  • 回复@海之宁:你可以试着咬嘛……看咬不咬得动? 2019-08-02
  • 内蒙古规范高考网上填报志愿类培训 2019-07-23
  • 祁县市监局积极推进商事制度改革 2019-07-23
  • 习近平的“蓝色信念” 2019-07-22
  • 关于《中华人民共和国监察法(草案)》的说明 2019-07-11
  • 这是没文化和懒人的语言。瞎扯淡! 2019-07-11
  • 新型国际关系擘画人类未来 2019-07-06
  • 无雨则旱,有雨就淹,成为常态。 2019-07-03
  • 每逢佳节酒席多,随不起的份子伤不起的面子 2019-07-03
  • 美媒:南极洲26年流失3万亿吨冰 致海平面上升7.6毫米 2019-07-01
  •  手机版 | 登陆 | 注册 | 留言 | 设首页 | 加收藏
    当前位置: 网站首页 > 行业资讯 > 文章

    新疆福彩25选7走势:程序中的robots.txt在什么情况下可以修改

    新疆35选7的开奖号 www.sypti.com 时间:2016-05-09    点击: 次    来源:网络    作者:佚名 - 小 + 大

    robots.txt是什么:

    robots.txt是一个纯文本文件,在这个文件中网站管理者可以声明该网站中不想被robots访问的部分,或者指定搜索引擎只收录指定的内容。

    当一个搜索机器人(有的叫搜索蜘蛛)访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围;如果该文件不存在,那么搜索机器人就沿着链接抓取。

    另外,robots.txt必须放置在一个站点的根目录下,而且文件名必须全部小写。

    什么情况下可以修改:

    当你在程序中新增加文件夹的时候,而且该文件夹不想被搜索引擎抓取时,就可以修改了,使用记事本打开,然后在最下面添加Disallow: /文件夹名称/即可。

    一般情况下我们个人网站考虑不让搜索引擎抓取是出于?;ひ?、增加安全性、做搜索引擎优化而进行的,按照这样的思路,哪些文件夹设置为拒绝抓取就一目了然了

    上一篇:系统所需要的运行环境有哪些购买什么样的空间

    下一篇:用手机访问网站会自动跳转到手机版

    版权声明 | 关于阿布之家|阿布家.. | 广告服务 | 免责声明 | 联系我们 | 网站帮助
    新疆35选7的开奖号  |   QQ:155096168  |  地址:广东省广州市番禺区康乐路康乐园  |  电话:--  |  
  • 以朝鲜民主主义人民共和国为例,难道特金会是由朝鲜工人、农民主导的?[哈哈] 2019-08-20
  • 安徽省直机关领导干部宪法学习宣传报告会br暨“省直机关大讲堂”第四十四讲在肥举办 2019-08-20
  • 人民网驻汕头记者报道集 2019-08-19
  • 以仪式守护节日文化--旅游频道 2019-08-19
  • 这个帖子,本人已经驳斥多次了。共产主义不是不能实行按劳分配,而是不需要实行按劳分配。共产主义时代,产品极大丰富,所以实行按劳分配是多余的,好比脱裤子放屁!... 2019-08-11
  • 回复@海之宁:你可以试着咬嘛……看咬不咬得动? 2019-08-02
  • 内蒙古规范高考网上填报志愿类培训 2019-07-23
  • 祁县市监局积极推进商事制度改革 2019-07-23
  • 习近平的“蓝色信念” 2019-07-22
  • 关于《中华人民共和国监察法(草案)》的说明 2019-07-11
  • 这是没文化和懒人的语言。瞎扯淡! 2019-07-11
  • 新型国际关系擘画人类未来 2019-07-06
  • 无雨则旱,有雨就淹,成为常态。 2019-07-03
  • 每逢佳节酒席多,随不起的份子伤不起的面子 2019-07-03
  • 美媒:南极洲26年流失3万亿吨冰 致海平面上升7.6毫米 2019-07-01
  • 红彩会秒速飞艇计划在线 快乐时时彩开奖号码 有什么手机买彩票软件好 篮彩混合过关怎么玩 福彩快3害得我家破人亡 上海快3今日开奖结果 福建体育彩票十一选 排列7 江西时时彩10分钟更新 胜平负让球胜平负 25选5开奖 6肖中特网站 彩票开奖 广西快3中奖查询 黑龙江22选5行列图