什么是robots.txt？

我持保留意见... 嘿嘿， robots.txt啊，就是像机器人一样的东西，它Ke以帮助我们告诉搜索引擎哪些页面不想让它kan，就像告诉小伙伴我不在家一样。

怎么让搜索引擎不收录我的网站呢？

想要让搜索引擎不收录你的网站， hen简单，我们就要写一个叫Zuorobots.txt的文件，放在网站的根目录里。这个文件就像一张禁止牌，告诉搜索引擎哪些地方是不许进的，看好你哦！。

步骤一：创建robots.txt文件

先说说 我们需要在电脑上打开记事本，然后写下这些代码：

    User-agent: *
    Disallow: /
    

这样就告诉所有的搜索引擎，别进来我的网站了。

步骤二：保存并上传

把记事本保存为robots.txt， 记得文件类型要选“所有文件”， 推倒重来。 然后上传到网站的根目录。

设置HTTP请求头

除了robots.txt，我们还Ke以通过设置HTTP请求头来禁止搜索引擎收录，拖进度。。

总的来说... 这个嘛，就需要用到一些复杂的代码了不过别担心，我来简单介绍一下。

    X-Frame-Options: SAMEORIGIN
    

这个代码的意思是 只有同一个源的服务器才Neng嵌入我们的网页，这样就防止了搜索引擎爬虫的嵌入。

无语了... 通过以上方法，我们就Ke以让搜索引擎不再收录我们的网站了。不过Ru果你想要扭转局面让网站被收录，那可就又是另一番操作了哦！

好了 今天的小秘密就分享到这里希望你学会了这些小技巧，Ke以让你的网站找到属于自己的位置。