Publica tu empresa
Tiendas online Tecnología y software Diseño web y agencias Salud y bienestar Educación y formación Noticias y medios Viajes y turismo Hostelería y restaurantes Publicar

Robots.txt

El archivo robots.txt es un pequeño documento de texto que vive en la raíz de tu sitio web y actúa como un portero para los robots de los buscadores. En él le indicas a Google y otros motores qué páginas pueden visitar y cuáles deben ignorar al explorar tu web.

Para un pequeño negocio esto importa porque, si los robots pierden tiempo rastreando páginas sin valor (como filtros internos, zonas de administración o páginas duplicadas), pueden dedicar menos atención a tus páginas importantes: tu catálogo, tus servicios o tu blog. Un robots.txt bien configurado ayuda a que los buscadores trabajen de forma más eficiente en tu sitio.

Un consejo práctico: asegúrate de que tu robots.txt no bloquee por error páginas que sí quieres que aparezcan en Google. Puedes verlo escribiendo en el navegador tudominio.es/robots.txt. Si ves bloqueada alguna sección importante, consulta con tu desarrollador o revísalo desde Google Search Console, que te avisa cuando detecta problemas de rastreo.

Términos relacionados

Indexación Rastreo (crawling) Sitemap

← Volver al Diccionario web y SEO