- 積分
- 475
- 威望
- 475
- 金錢
- 358
- 最後登錄
- 2015-10-3
|
[教學] [DG小说论坛]robots.txt文件禁止搜索引擎蜘蛛爬行规则设置
如果想要禁止搜索引擎蜘蛛爬行规则,那么在网站www根目录下建立一个后缀名为:.txt的robots文本文本;这里以Discuz论坛为例,格式代码如下所示:
本帖隱藏的內容需要回復才可以瀏覽
如果说你希望搜索引擎能够抓取到你所有的页面,可以建立一个空文本文档robots.txt 上传上去即可。
有问题欢迎咨询。
http://dg.weclub.info |
|