User-agent: *
Allow: /

# 禁止抓取敏感页面和API
Disallow: /api/
Disallow: /#/login
Disallow: /#/register
Disallow: /#/chat
Disallow: /#/settings
Disallow: /admin/

# 网站地图位置（支持多主题）
Sitemap: https://pingzishuo.com/sitemap.xml
Sitemap: https://shushubuyue.net/sitemap.xml

# 爬取延迟设置
Crawl-delay: 1

# 特定搜索引擎优化
User-agent: Baiduspider
Crawl-delay: 1

User-agent: Googlebot
Crawl-delay: 1