User-agent: *
Allow: /
Disallow: /admin/
Disallow: /backup/
Disallow: /tmp/
Disallow: /cache/
Disallow: /config/
Disallow: /include/
Disallow: /data/
Disallow: /logs/
Disallow: /cgi-bin/

# 抓取延迟设置
Crawl-delay: 2

# 禁止某些过度抓取的爬虫
User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

# 针对不同搜索引擎的特定设置
User-agent: Googlebot
Crawl-delay: 1

User-agent: Bingbot
Crawl-delay: 1

User-agent: Baiduspider
Crawl-delay: 1

User-agent: 360Spider
Crawl-delay: 2

# 网站地图
Sitemap: https://simiao.org.cn/sitemap.html
# Sitemap: https://simiao.org.cn/sitemap.xml

# 中国各省份寺庙古建筑艺术研究网站
# 网站：simiao.org.cn
# 最后更新：2026年01月15日