# ROBOTS.TXT - DATA ACTIVITY
# Gerado em: 15/01/2025
# Site: https://dataactivity.com.br
# Agência de Marketing Digital especializada em Poá, Mogi das Cruzes e região

# ============================================
# CONFIGURAÇÕES GERAIS PARA TODOS OS BOTS
# ============================================
User-agent: *

# PERMITIR ACESSO COMPLETO AO SITE
Allow: /

# PERMITIR EXPLICITAMENTE RECURSOS IMPORTANTES
Allow: /assets/
Allow: /marketing-digital-*/
Allow: /politica-privacidade/
Allow: /termos-uso/
Allow: /cookies/
Allow: /sitemap.xml
Allow: /robots.txt

# BLOQUEAR ÁREAS ADMINISTRATIVAS E SENSÍVEIS
Disallow: /admin/
Disallow: /wp-admin/
Disallow: /wp-content/uploads/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /private/
Disallow: /temp/
Disallow: /tmp/
Disallow: /test/
Disallow: /node_modules/
Disallow: /src/

# BLOQUEAR ARQUIVOS DE SISTEMA E CONFIGURAÇÃO
Disallow: /.htaccess
Disallow: /.env
Disallow: /.git/
Disallow: /config/
Disallow: /package.json
Disallow: /package-lock.json
Disallow: /tailwind.config.js
Disallow: /postcss.config.js
Disallow: /*.log$
Disallow: /*.bak$
Disallow: /*.old$
Disallow: /*.backup$
Disallow: /*.ini$
Disallow: /*.conf$
Disallow: /*.js$ # Bloquear scripts de otimização

# BLOQUEAR PARÂMETROS DE URL DE TRACKING
Disallow: /*?utm_*
Disallow: /*?ref=*
Disallow: /*?fbclid=*
Disallow: /*?gclid=*
Disallow: /*?mc_*
Disallow: /*?campaign=*
Disallow: /*?source=*
Disallow: /*?medium=*

# ============================================
# CONFIGURAÇÕES ESPECÍFICAS PARA GOOGLEBOT
# ============================================
User-agent: Googlebot
Allow: /assets/css/
Allow: /assets/js/
Allow: /assets/images/
Allow: /assets/fonts/
Allow: /assets/logos/
Crawl-delay: 1

# ============================================
# CONFIGURAÇÕES PARA BINGBOT
# ============================================
User-agent: Bingbot
Allow: /assets/css/
Allow: /assets/js/
Allow: /assets/images/
Allow: /assets/fonts/
Allow: /assets/logos/
Crawl-delay: 2

# ============================================
# CONFIGURAÇÕES PARA OUTROS BOTS IMPORTANTES
# ============================================

# YANDEX BOT
User-agent: YandexBot
Allow: /assets/
Crawl-delay: 3

# DUCKDUCKGO BOT
User-agent: DuckDuckBot
Allow: /assets/
Crawl-delay: 2

# FACEBOOK BOT (para Open Graph)
User-agent: facebookexternalhit
Allow: /
Crawl-delay: 1

# TWITTER BOT (para Twitter Cards)
User-agent: Twitterbot
Allow: /
Crawl-delay: 1

# LINKEDIN BOT
User-agent: LinkedInBot
Allow: /
Crawl-delay: 2

# ============================================
# BLOQUEAR BOTS INDESEJADOS
# ============================================

# BOTS DE SEO TOOLS (OPCIONAL - DESCOMENTE SE NECESSÁRIO)
# User-agent: AhrefsBot
# Disallow: /

# User-agent: SemrushBot
# Disallow: /

# User-agent: MJ12bot
# Disallow: /

# User-agent: DotBot
# Disallow: /

# BOTS MALICIOSOS CONHECIDOS
User-agent: SiteBot
Disallow: /

User-agent: WebReaper
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft URL Control
Disallow: /

User-agent: Xenu
Disallow: /

# ============================================
# LOCALIZAÇÃO DOS SITEMAPS
# ============================================
Sitemap: https://dataactivity.com.br/sitemap.xml

# ============================================
# INFORMAÇÕES DO SITE
# ============================================
# Site: Data Activity - Agência de Marketing Digital
# Especialidades: Marketing Digital, Desenvolvimento Web, Tráfego Pago
# Área de Atuação: Poá, Mogi das Cruzes, Suzano, Itaquaquecetuba e região
# Contato: contato@dataactivity.com.br
# Telefone: +55 11 99945-8215
# Última atualização: 15/01/2025
# Versão: 2.0 - Otimizada para SEO