Robots.txt para vBSEO habilitado para correr foro VBET 4.2.3

[norku]

He estado buscando y buscando, pero no puede encontrar consejos sobre el contenido de mi archivo robots.txt. Estoy corriendo VBET 4.2.3 con Matías 3.6.0 RC 2.

Supongo que necesito una similar a la que ustedes están usando?


¿Está bien uno o tengo la enorme ustedes están usando en el que bloquear el acceso a cada archivo de idioma?

# Allow Archiver
User-agent: ia_archiver
Allow: /

User-agent: *
Disallow: /forum/*.js
Disallow: /forum/*.jsp
Disallow: /forum/*.cfm
Disallow: /forum/*.asp
Disallow: /forum/*.aspx
Disallow: /forum/*.cgi
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/install/
Disallow: /forum/customavatars/
Disallow: /forum/archive/
Disallow: /forum/attachments/ 
Disallow: /forum/ajax.php
Disallow: /forum/attachment.php
Disallow: /forum/admincp/
Disallow: /forum/calendar.php
Disallow: /forum/cron.php
Disallow: /forum/editpost.php
Disallow: /forum/global.php
Disallow: /forum/external.php
Disallow: /forum/image.php
Disallow: /forum/inlinemod.php
Disallow: /forum/joinrequests.php
Disallow: /forum/login.php
Disallow: /forum/billspaypal.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/moderator.php
Disallow: /forum/newattachment.php
Disallow: /forum/newreply.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/poll.php
Disallow: /forum/postings.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/report.php
Disallow: /forum/reputation.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showgroups.php
Disallow: /forum/subscription.php
Disallow: /forum/threadrate.php
Disallow: /forum/usercp.php
Disallow: /forum/usernote.php
Disallow: /forum/faq.php
Disallow: /forum/vbseo.php
Disallow: /forum/vbseocp.php
Disallow: /forum/vbseocpform.php
Disallow: /forum/chat.php

Sitemap: http://www.mydomain.com/forum/sitemap_index.xml.gz 

[kamilkurczak]

hola,
Usted debe desactivar esta páginas de su archivo robots.txt también.
¿Por qué?

La siguiente dirección:

/forum/calendar.php

Tienen el mismo contenido como éste:

/forum/de/calendar.php

pero la url es diferente y google indexa esta url (esta página) también.

Puede utilizar un archivo robots.txt de nuestro ejemplo (el total se encuentra en el archivo adjunto en este post - parte inferior)
http://www.vbenterprisetranslator.co...rformance.html

[norku]

Bueno. Gracias. Voy a cambiar ahora. Estoy usando la biblioteca de medios 8wayrun mod en mi sitio. Media.php se redirige a la actualidad / foro / Mediateca / ¿Hay algo que hay que tener cuidado de este con respecto a robots.txt y las traducciones? Puedo empezar un nuevo hilo si te gusta?

[kamilkurczak]

Nosotros le podemos dar un ejemplo de robots.txt (que ya utilizan el mismo como esta).
Si usted desea tener este sitio para discapacitados google -> bloquearlo (puede bloquear url a la página php y para redirigir parte -. Si se trata de redirección permanente) si se trata de una redirección 302 (no permanente) url Blonk única. sitio de PHP.