# 网站地图
Sitemap: https://30dnf.cn/sitemap.xml

# 允许所有搜索引擎爬取
User-agent: *
Allow: /

# 禁止爬取的目录
Disallow: /admin/
Disallow: /api/
Disallow: /temp/
Disallow: /tmp/

# 禁止爬取的文件类型
Disallow: /*.json$
Disallow: /*.txt$

# 禁止爬取特定页面
Disallow: /verification.html