User-agent: *
Allow: /

# 允许所有主流搜索引擎爬虫
User-agent: Baiduspider
Allow: /

User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Sogou-web-spider
Allow: /

User-agent: 360Spider
Allow: /

User-agent: YisouSpider
Allow: /

# 禁止抓取后台和管理页面
Disallow: /admin/
Disallow: /api/
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /*.php$
Disallow: /*?*
Disallow: /*&*

# 抓取延迟（秒）
Crawl-delay: 1

# Sitemap位置
Sitemap: https://www.xdfyz.com/sitemap.xml
Sitemap: https://www.xdfyz.com/sitemap.txt