什么是robots.txt？

哎呦，你们知道robots.txt吗？就是一个超级神奇的文件， 它就像一个秘密花园的门卫， 我裂开了。 告诉搜索引擎哪些地方Ke以进去逛逛，哪些地方是不让进的哦。

比如说网站后台啊，用户信息啊，这些dou是hen私密的，我们就不想让搜索引擎kan到对吧？那怎么办呢？就用robots.txt来说“不欢迎”嘛，挺好。！

先说说我们要先打开电脑上的记事本，然后开始写写写。 换句话说... 写法有点像小朋友画画，要按照一定的规则来哦。

比如说 我们要告诉百度蜘蛛不要进admin文件夹，就要这样写： Disallow: /admin/，躺平...

要是我们不想让所有蜘蛛kan到wp-admin，就要 走捷径。 这样写： Disallow: /wp-admin/*

还有通配符哦！

你知道吗，我们还Ke以用一些特殊符号来代表hen多hen多的东西，这就是通配符啦！比如星号，它Ke以代表任意多的字符。

比如说 我们不想让蜘蛛kan到所有.js文件，就Ke以这样写： Disallow: /*.js$

注意啦，不要写错了哦！

写robots.txt就像Zuo数学题，要细心，要仔细检查。比如 我们写Disallow: /ab蜘蛛只会kanab目录下的文件，而不会kan到ab目录本身哦，栓Q了...。

还有， User-agent后面要跟蜘蛛的名字， 我跪了。 比如百度蜘蛛就写Baiduspider。

写完之后怎么办呢？

写完之后我们要把这个文件叫Zuorobots.txt，然后放在网站的根目录里。这样，蜘蛛访问网站的时候，就会先找到这个文件，按照我们的规定来行事了。

一下：

CPU你。 学习robots.txt的写法， 就像学会了魔法，Ke以让我们的网站geng平安，geng有利于SEO优化。不过也要记得，这个魔法可不Neng乱用哦，要用得恰当，才Neng发挥它的Zui大作用。

大胆一点... 好了今天的分享就到这里啦！希望你们douNeng学会这个神奇的魔法，让你们的网站geng加强大哦！