Robots.txt
El archivo robots.txt es un archivo que indica a los motores de búsqueda qué partes de un sitio web pueden o no ser rastreadas e indexadas, ayudando a controlar el comportamiento de los bots en el sitio.
Creado por: Ángel González | Categoría: SEO
Publicado el: 9/10/2024
Estado: estable | Dificultad: intermedio
Traducción: Robots.txt
Frase de ejemplo: El archivo robots.txt controla qué partes de un sitio web pueden ser rastreadas por los motores de búsqueda.
Sinónimos: archivo robots, directivas de rastreo, archivo de control de bots
Etiquetas: SEO, web, indexación
Términos relacionados
- SEO
- web
- motores de búsqueda