=
6、什么是Robots?Robots.txt文件放在哪里?
发布时间:2019-11-12 19:49:23   浏览人数: 6523 次  

答:搜索引擎通过一种程序robot(又称spider),自动访问互联网上的网页并获取网页信息。

可以在网站中创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot访问的部分,这样,该网站的部分或全部内容就可以不被搜索引擎收录了,或者指定搜索引擎只收录指定的内容。

robots.txt文件应该放在网站根目录下。举例来说,当robots访问一个网站(比如http://www.abc.com)时,首先会检查该网站中是否存在http://www.abc.com/robots.txt这个文件,如果机器人找到这个文件,它就会根据这个文件的内容,来确定它访问权限的范围。


看不明白该文挡,发信息给我们:
用户: * 密码: * (需要登陆
标题:
内容:

查询关键词字:   
6、什么是Robots?Robots.txt文件放在哪里?
发布时间:2019-11-12 19:49:23   浏览人数: 6523 次  

答:搜索引擎通过一种程序robot(又称spider),自动访问互联网上的网页并获取网页信息。

可以在网站中创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot访问的部分,这样,该网站的部分或全部内容就可以不被搜索引擎收录了,或者指定搜索引擎只收录指定的内容。

robots.txt文件应该放在网站根目录下。举例来说,当robots访问一个网站(比如http://www.abc.com)时,首先会检查该网站中是否存在http://www.abc.com/robots.txt这个文件,如果机器人找到这个文件,它就会根据这个文件的内容,来确定它访问权限的范围。


看不明白该文挡,发信息给我们:
用户: * 密码: * (需要登陆
标题:
内容:

联系我们

销售电话(400-151-5798)

售后服务(3366365-808)

服务邮箱(service@xpp.cn)

加盟QQ(1405520588)

微信公众号
关于我们

中华人民共和国增值电信业务经营许可证: B2-20150291

小胖传播 ? 版权所有 Copyright ? 2000-2024 XPP.cn. All rights reserved  备案号码:粤ICP备17140174号

声明:本网站中所使用到的其他各种版权内容,包括但不限于文章、图片、视频、音频、字体等内容版权归原作者所有,如权利所有人发现,请及时告知,以便我们删除版权内容

小胖传播 ? 版权所有 Copyright ? 2000-2017 NiceNIC.net,Inc. All rights reserved  备案号:粤ICP备17140174号

声明:本网站中所使用到的其他各种版权内容,包括但不限于文章、图片、视频、音频、字体等内容版权归原作者所有,如权利所有人发现,请及时告知,以便我们删除版权内容

产品

域名注册 软文代写 海报设计
多词推 品牌推 全球推
媒体营销 微博营销 微信营销 论坛营销 视频营销