Una de las recomendaciones para que tengas un mejor posicionamiento de SEO de tu sitio web , es que tengas agregado tu sitemap en tu archivo de robots.txt, para ello debes ingresar a google search console Y EN BUSCAR ESCRIBIR ROBOTS y clic en el botón ABRIR LA HERRAMIENTA DE ROBOTS.TXT

En la última línea se agrega lo siguiente:

– Si usas el plugin Google xml Sitemap:

Sitemap: tusitioweb.com/sitemap.xml 

– O si usas el sitemap de Yoast Seo:

Sitemap: tusitioweb.com/sitemap_index.xml 

Clic en ENVIAR, y se despliega la siguiente ventana:

Debemos seguir esos pasos de la siguiente manera:

1. Nos descargamos el archivo robots.txt

2. Agremamos en la raiz principal de nuestro sitios web (Public Html)

3. Comprobamos la versión actualizada

4. Solicitamos a google la actualización.

Recomendación para un óptimo robots.txt

Un ejemplo para un robots.txt se recomienda lo siguiente:

# Bloquear o permitir acceso a contenido adjunto. (Si la instalación está en /public_html).

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-content/plugins/   
Disallow: /wp-content/themes/   
Disallow: /wp-includes/   
Disallow: /wp-admin/

#Impedir el acceso a los diferentes feed que genere la página

Allow: /feed/$
Disallow: /feed   
Disallow: /comments/feed   
Disallow: /*/feed/$   
Disallow: /*/feed/rss/$   
Disallow: /*/trackback/$   
Disallow: /*/*/feed/$   
Disallow: /*/*/feed/rss/$   
Disallow: /*/*/trackback/$   
Disallow: /*/*/*/feed/$   
Disallow: /*/*/*/feed/rss/$   

# Impedir URLs terminadas en /trackback/ que sirven como Trackback URL.   

Disallow: /*/*/*/trackback/$

# Evita bloqueos de CSS y JS.

Allow: /*.js$
Allow: /*.css$

#Bloquear todos los pdfs

Disallow: /*.pdf$

#Bloquear parámetros

Disallow: / *?

# Lista de bots que deberías permitir.

User-agent: Googlebot-Image
Allow: /wp-content/uploads/

User-agent: Adsbot-Google
Allow: /

User-agent: Googlebot-Mobile
Allow: /


 # Lista de bots bloqueados

User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: Baiduspider
Disallow: /
User-agent: GurujiBot
Disallow: /
User-agent: hl_ftien_spider
Disallow: /
User-agent: sogou spider
Disallow: /
User-agent: Yeti
Disallow: /
User-agent: YodaoBot
Disallow: /

#Desautorizar a páginas innecesarias

Disallow: /gracias-por-suscribirte

# Añadimos una indicación de la localización del sitemap

Sitemap: https://sitioweb/sitemap_index.xml

Categories:

No responses yet

    Deja una respuesta

    Tu dirección de correo electrónico no será publicada.

    Publicidad
    × ¿Cómo puedo ayudarte?