-
什么是robots.txt
在网站建设过程中我们会有一部分内容不希望被搜索引擎抓取到或者不希望其在互联网中出现，那么要怎么办呢？我要怎么跟搜索引擎说你不要抓取我的xx内容呢？这时候robots就派上用场了。 Robots.txt是存放于网站根目录下用于规定搜索引擎对网站内容抓取范围的文本文件，就这么一句话可以解释robots.txt是什么，但是我们需要注意的几点： 1.robots.txt必须存放在网站的根目录下。 2.其命…- 1
- 0
-
￥优惠劵使用时效：无法使用使用时效：
之前
使用时效：永久有效优惠劵ID：×