# Robots.txt para Steelink ERP - Optimizado para SEO
# Última actualización: Diciembre 2024

# Permitir a todos los buscadores
User-agent: *
Allow: /

# Indicar la ubicación del sitemap
Sitemap: https://taller.steelink.com.mx/sitemap.xml

# Bloquear acceso a archivos sensibles y de desarrollo
Disallow: /api/
Disallow: /admin/
Disallow: /.env
Disallow: /config.js
Disallow: /service-worker.js
Disallow: /manifest.json

# Bloquear parámetros de seguimiento para evitar contenido duplicado
Disallow: /*?utm_*
Disallow: /*?fbclid*
Disallow: /*?gclid*
Disallow: /*?_ga*

# Optimización de rastreo - Especificar crawl-delay para servidores
Crawl-delay: 1

# Permitir archivos estáticos importantes para SEO
Allow: /static/
Allow: /assets/
Allow: /images/
Allow: /fonts/

# Configuración específica para Googlebot
User-agent: Googlebot
Allow: /

# Configuración específica para Bingbot
User-agent: Bingbot
Allow: /

# Permitir rastreo de imágenes para Google Image Search
User-agent: Googlebot-Image
Allow: /images/

# Permitir rastreo de videos para Google Video Search
User-agent: Googlebot-Video
Allow: /videos/

# Bloquear bots maliciosos conocidos
User-agent: SemrushBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: Baiduspider
Disallow: /

User-agent: YandexBot
Disallow: /