# Robots.txt para Um Por Cento - Desenvolvimento Pessoal Masculino
# Otimizado para SEO máximo e indexação estratégica
# Última atualização: 27/01/2025

# === CONFIGURAÇÃO GERAL ===
User-agent: *
Allow: /
Allow: /blog/
Allow: /blog/desenvolvimento-pessoal-masculino-guia-completo/
Allow: /sitemap/
Allow: /sitemap.xml
Allow: /sitemap-index.xml

# === ÁREAS BLOQUEADAS ===
# Administrativas
Disallow: /admin/
Disallow: /api/
Disallow: /dashboard/
Disallow: /login/
Disallow: /register/

# Técnicas e de desenvolvimento
Disallow: /_astro/
Disallow: /node_modules/
Disallow: /.git/
Disallow: /.kiro/
Disallow: /.vscode/
Disallow: /dist/
Disallow: /build/

# Páginas de processo
Disallow: /checkout-success/
Disallow: /payment-processing/
Disallow: /thank-you/
Disallow: /error/
Disallow: /404/

# Parâmetros de URL indesejados
Disallow: /*?utm_*
Disallow: /*?ref=*
Disallow: /*?source=*
Disallow: /*?campaign=*
Disallow: /*?fbclid=*
Disallow: /*?gclid=*

# === BOTS ESPECÍFICOS ===

# Google Bot - Prioridade máxima
User-agent: Googlebot
Allow: /
Allow: /blog/
Allow: /sitemap.xml
Crawl-delay: 1

# Google Bot para imagens
User-agent: Googlebot-Image
Allow: /
Allow: /images/
Allow: /public/
Crawl-delay: 1

# Bing Bot
User-agent: Bingbot
Allow: /
Allow: /blog/
Crawl-delay: 1

# Yahoo Bot
User-agent: Slurp
Allow: /
Allow: /blog/
Crawl-delay: 2

# DuckDuckGo Bot
User-agent: DuckDuckBot
Allow: /
Allow: /blog/
Crawl-delay: 1

# === BOTS DE REDES SOCIAIS ===

# Facebook
User-agent: facebookexternalhit
Allow: /
Allow: /blog/
Crawl-delay: 0

# Twitter
User-agent: Twitterbot
Allow: /
Allow: /blog/
Crawl-delay: 0

# LinkedIn
User-agent: LinkedInBot
Allow: /
Allow: /blog/
Crawl-delay: 1

# WhatsApp
User-agent: WhatsApp
Allow: /
Allow: /blog/
Crawl-delay: 0

# === BOTS MALICIOSOS BLOQUEADOS ===
User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MajesticSEO
Disallow: /

User-agent: BLEXBot
Disallow: /

# === CONFIGURAÇÕES DE CRAWLING ===

# Crawl delay padrão (1 segundo)
Crawl-delay: 1

# === SITEMAPS ===
# Sitemap principal
Sitemap: https://umporcento.vercel.app/sitemap-index.xml
Sitemap: https://umporcento.vercel.app/sitemap.xml

# Sitemaps específicos
Sitemap: https://umporcento.vercel.app/blog-sitemap.xml
Sitemap: https://umporcento.vercel.app/pages-sitemap.xml

# === NOTAS PARA DESENVOLVEDORES ===
# Este robots.txt foi otimizado para:
# 1. Maximizar indexação de conteúdo relevante
# 2. Bloquear áreas técnicas e administrativas
# 3. Controlar crawling de bots específicos
# 4. Otimizar para desenvolvimento pessoal masculino
# 5. Permitir compartilhamento em redes sociais

# Para verificar: https://www.google.com/webmasters/tools/robots-testing-tool
# Validação: https://support.google.com/webmasters/answer/6062598