# =============================================================================
# 糖豆视频 · 站群 SEO Robots（相对路径 · 适配随机域名）
# 糖豆社区热门MV在线观看平台
# Allow: / 全站允许抓取 · Sitemap 相对路径由爬虫按当前站点根解析
# 动态：index.php → /robots.txt · 文章增删后访问 sitemap.xml 自动更新
# =============================================================================

# 全站爬虫
User-agent: *
Allow: /
Disallow: /tools/
Disallow: /deploy/

# 百度
User-agent: Baiduspider
Allow: /
Disallow: /tools/
Disallow: /deploy/
Crawl-delay: 1

# 百度渲染
User-agent: Baiduspider-render
Allow: /
Disallow: /tools/
Disallow: /deploy/
Crawl-delay: 1

# 搜狗
User-agent: Sogou web spider
Allow: /
Disallow: /tools/
Disallow: /deploy/
Crawl-delay: 1

# 360
User-agent: 360Spider
Allow: /
Disallow: /tools/
Disallow: /deploy/

# 神马
User-agent: YisouSpider
Allow: /
Disallow: /tools/
Disallow: /deploy/
Crawl-delay: 1

# 头条
User-agent: Bytespider
Allow: /
Disallow: /tools/
Disallow: /deploy/

# Google
User-agent: Googlebot
Allow: /
Disallow: /tools/
Disallow: /deploy/

# Bing
User-agent: Bingbot
Allow: /
Disallow: /tools/
Disallow: /deploy/

# Sitemap（相对路径 · 不写死域名）
Sitemap: sitemap.xml