Robots.txt para vBSEO habilitado forum execução Vbet 4.2.3

[norku]

Estive pesquisando e pesquisando, mas não podem encontrar dicas sobre o conteúdo do meu robots.txt. Estou correndo Vbet 4.2.3 com vBSEO 3.6.0 RC 2.

Presumo que eu preciso de um semelhante ao que vocês estão usando?


É este um bem ou que eu preciso a um enorme que vocês estão utilizando, se você bloquear o acesso a cada arquivo por idioma?

# Allow Archiver
User-agent: ia_archiver
Allow: /

User-agent: *
Disallow: /forum/*.js
Disallow: /forum/*.jsp
Disallow: /forum/*.cfm
Disallow: /forum/*.asp
Disallow: /forum/*.aspx
Disallow: /forum/*.cgi
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/install/
Disallow: /forum/customavatars/
Disallow: /forum/archive/
Disallow: /forum/attachments/ 
Disallow: /forum/ajax.php
Disallow: /forum/attachment.php
Disallow: /forum/admincp/
Disallow: /forum/calendar.php
Disallow: /forum/cron.php
Disallow: /forum/editpost.php
Disallow: /forum/global.php
Disallow: /forum/external.php
Disallow: /forum/image.php
Disallow: /forum/inlinemod.php
Disallow: /forum/joinrequests.php
Disallow: /forum/login.php
Disallow: /forum/billspaypal.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/moderator.php
Disallow: /forum/newattachment.php
Disallow: /forum/newreply.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/poll.php
Disallow: /forum/postings.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/report.php
Disallow: /forum/reputation.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showgroups.php
Disallow: /forum/subscription.php
Disallow: /forum/threadrate.php
Disallow: /forum/usercp.php
Disallow: /forum/usernote.php
Disallow: /forum/faq.php
Disallow: /forum/vbseo.php
Disallow: /forum/vbseocp.php
Disallow: /forum/vbseocpform.php
Disallow: /forum/chat.php

Sitemap: http://www.mydomain.com/forum/sitemap_index.xml.gz 

[kamilkurczak]

Olá,
Você deve desativar estas páginas a partir de seu arquivo robots.txt também.
Por quê?

Este endereço:

/forum/calendar.php

Têm o mesmo conteúdo como este:

/forum/de/calendar.php

mas a url é diferente e google irá indexar este url (nesta página) também.

Você pode usar um arquivo robots.txt do nosso exemplo (o que completa está no anexo neste post - parte inferior)
http://www.vbenterprisetranslator.co...rformance.html

[norku]

Okay. Obrigado. Eu vou mudar isso agora. Eu estou usando a biblioteca de mídia 8wayrun mod no meu site. Media.php é redirecionado atualmente para / forum / media-biblioteca / Existe algo que eu preciso ter o cuidado de com este em relação a robots.txt e traduções? Eu posso iniciar um novo tópico se você gosta?

[kamilkurczak]

Podemos dar-lhe um exemplo de robots.txt (que já usam o mesmo como este).
Se você quer ter este site desativado para google -> bloqueá-lo (você pode bloquear url para o site php e redirecionado parte para -. Se isso é redirecionamento permanente) se este é um redirecionamento 302 (não permanente) url Blonk apenas. site do php.