# # This file is used to allow crawlers to index our site. # # robots使用请见http://www.robotstxt.org/robotstxt.html # # # # Sitemap指令不受 user-agent 行的影响,因此可放在文件中的任意位置 # User-Agent: 适用规则的漫游器 # Disallow: 要拦截的网页 # 可在一个条目中包含多个 Disallow 行和多个 User-Agent # 允许所有机器人抓我们的网页 "User-agent: *" # Bans from images "Disallow: /images/"(禁止从images目录抓取) # Sitemap:http://www.kzly.org/sitemap.xml User-agent: * Disallow: /images/