Un archivo robots.txt es tan insignificante que podrías pasarlo por alto. Sin embargo…
Como soy majo, te voy a dar la receta para conseguir un robot gratis. Quizá ya lo hayas intuido: aquí en realidad se trata de un archivo destinado a los robots que rastrean tu sitio web a intervalos regulares, como los de Google, por ejemplo. Ese pequeño archivo insignificante puede marcar la diferencia, porque indica a los motores de búsqueda la mejor ruta para recorrer la propiedad. ¡En marcha…!
Receta n.º 13: Invierte en un robot de cocina SEO, ¡no es un lujo!

Este archivo es de lo más sencillo. Debe ubicarse en la raíz de tu sitio y llamarse robots.txt; además es muy fácil de integrar porque lo haremos gracias a una extensión muy popular: Yoast
Configuraremos esa extensión en una próxima receta, pero así estará instalada y lista para usarse.
- 1 extensión Yoast SEO
- Instala la extensión Yoast SEO
- Actívala y ve al nuevo menú SEO que apareció a la izquierda y arriba de tu panel de administración.
- Haz clic en Ajustes generales, luego en la pestaña Funcionalidades
- En la lista, pon la función 'Mapas del sitio XML' en Activado
Y ya está, terminado. No te lo esperabas, ¿eh? ¿Y para qué sirve? Como te dije en la introducción, es como una señal para Google. Le indica las rutas disponibles para visitar tu cocina y las direcciones prohibidas. Puede parecer ridículo, pero es simplemente esencial. ¡De nada!
