En este vídeo miraremos la característica de probador de robots.txt en la herramienta de Google Search console.
Esta herramienta todavía pertenece a la versión anterior de Google Search console y aún no se conoce una fecha para pasar a la actual versión.
Estos son algunos de los temas que veremos en este video:
– Miraremos Cómo usar el probador de robots.txt
– Podemos hacer pruebas dentro del archivo luego descargarlo y subirlo posteriormente a nuestro sitio así verificarlo antes de tenerlo en producción.
– Este archivo nos sirve para bloquear diferentes Robots de otros sistemas no solo en Google
– Les voy a dejar documentación al respecto de los robots juntos en la descripción del video
TIP: Antes de subir el archivo robots.txt, probemos varias veces con diferentes URLs. Un error en este archivo puede bloquear a Google y acabar con nuestra estrategia de SEO
