# Bloquear areas administrativas para los bots
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-login.php

# Permitir acceso a CSS, JS y otras assets necesarias para el renderizado
Allow: /wp-admin/admin-ajax.php
Allow: /wp-content/themes/
Allow: /wp-content/plugins/
Allow: /wp-content/uploads/

# Configurar el retraso entre solicitudes para evitar sobrecarga
User-agent: *
Crawl-delay: 15

# Específicos para bots conocidos
User-agent: Googlebot
Crawl-delay: 15

User-agent: Bingbot
Crawl-delay: 15

# Evitar indexar parámetros innecesarios
Disallow: /*?*
Disallow: /*&*

# Evitar archivos duplicados o sin utilidad para los usuarios
Disallow: /readme.html
Disallow: /wp-json/
Disallow: /trackback/
Disallow: /cgi-bin/

# Evitar URLs de feeds y similares
Disallow: /feed/
Disallow: /comments/