禁止百度蜘蛛收录某个文件

所列举的 User-agent: Baiduspider Disallow: /*。jpg Disallow: /*。jpeg Disallow: /*。gif Disallow: /*。png Disallow: /*。bmp 禁止百度蜘蛛Baiduspider抓取网站上所有图片，仅允许抓取网页，禁止抓取任何图片。不能某个文件，只能某个目录;如:User-agent:Disallow: /01/ 所以你要禁止某个文件，可以将此文件单独放到一个目录下面即可。在做SEO网站优化的时候，如果不想让搜索引擎的蜘蛛抓取收录站内的某个文件夹内容，可以在robots文件中书写相关规范。例如，不想让搜索引擎收录根目录里的一个文件夹yang，那么相关robots文件的写法如下：User-agent: * Disallow。首页不需要引导！你建立一个文本文档，以robots命名，把下面这段代码粘贴进去，传到网站根目录，就好了！User-agent:Disallow: /tenz/ 。我在robots。txt中设置了禁止百度收录我网站的内容，为何还出现在百度搜索结果中？如果其他网站链接了您robots。t