Categorías: Noticias

Los webmasters limitarán los rastreos del robot de Google

El buscador informará de las páginas que no deben ser indexadas por los robots de rastreo de Internet

El robot.txt., un modelo estándar creado en 1994, establece una norma para que aquéllos que diseñen un robot de rastreo de datos en la red tenga conocimiento de las páginas que, por exigencia del webmaster, no deban ser rastreadas y extraída su información por esos robots.

Google activó la opción de utilizar comodines (símbolo ‘ * ‘) para indicar claramente los ficheros que no deben ser rastreados por el robots del buscador hace ya algún tiempo, según apunta seobooks.com.

De este modo, se le puede ordenar a Googlebot que no indexe un fichero cuyo nombre incluya una determinada extensión como pueda ser «.gif» con indicarle lo siguiente:

User-agent: Googlebot

Disallow:/*.gif

María José Sánchez Valenzuela

Depto. Contenidos / Agencia Webpositer ## ## Me encanta la comunicación e Internet. Observo el mundo desde una profunda curiosidad y aspiro a aprender cada día de mi alrededor. Mi pasión es escribir. ## ##

Disqus Comments Loading...
Compartir
Publicado por
María José Sánchez Valenzuela

Artículos recientes

  • Consejos SEO
  • Vídeo Consejos

Cómo utilizar Twitter en tu empresa como herramienta para impulsar tu negocio y ganar seguidores gratis

Con una audiencia de 6 millones de usuarios activos en España, la inmersión en Twitter por parte de las empresas…

14 junio, 2019 12:45 am
  • Noticias

#SEOplus19: Todo listo para el evento SEO del año

¿Listo para participar en la batalla SEO más alucinante donde las tropas del White, Black y Grey Hat SEO lancen…

5 junio, 2019 7:18 am
  • Consejos SEO
  • Vídeo Consejos

Tutorial sobre SEMrush en español: Aprende a estudiar a tu competencia como un SEO profesional

Descubre en este tutorial sobre SEMrush cómo empezar a utilizar la herramienta SEO imprescindible para el análisis de la competencia.…

24 mayo, 2019 9:39 am
  • Consejos SEO
  • Vídeo Consejos

Cómo hacer fichas de producto atrapaventas para sumar clientes a tu tienda online

¿Quieres potenciar las ventas en tu e-commerce? Descubre las 10 claves para hacer fichas de producto de tu tienda online…

17 mayo, 2019 11:00 am

Utilizamos cookies propias y de terceros para analizar tus hábitos de navegación, obtener información estadística, mostrar publicidad personalizada e interactuar en redes sociales. Si continúas navegando consideramos que aceptas su uso. Más información, en nuestra Política de cookies: https://www.webpositer.com/privacidad-cookies.html