Manual Técnico Carpeta environments
Documentación Técnica: robots.txt (Production Frontend)
Ubicación
environments/prod/frontend/web/robots.txt
Definición
Archivo de control de acceso para robots/crawlers web en el frontend de producción de Yii2.
Propósito
- Gestionar acceso de bots
- Controlar indexación SEO
- Definir reglas de rastreo
- Optimizar visibilidad web
Contenido
Apply to robots.txt
Explicación:
- User-agent: *: Define reglas para todos los robots/crawlers
- Configurable para SEO
- Control de indexación
- Gestión de acceso web
Notas
- Entorno de producción
- Optimización SEO
- Acceso controlado
- Visibilidad configurada
Technical Documentation: robots.txt (Production Frontend)
Location
environments/prod/frontend/web/robots.txt
Definition
Web robot/crawler access control file for frontend in Yii2 production environment.
Purpose
- Manage bot access
- Control SEO indexing
- Define crawling rules
- Optimize web visibility
Content
Apply to robots.txt
Explanation:
- User-agent: *: Defines rules for all robots/crawlers
- SEO configurable
- Indexing control
- Web access management
Notes
- Production environment
- SEO optimization
- Controlled access
- Configured visibility