Robots.txt voor vBSEO-enabled forum draait Vbet 4.2.3

[norku]

Ik heb gezocht en gezocht, maar kan niet vinden tips over de inhoud van mijn robots.txt. Ik gebruik Vbet 4.2.3 met vBSEO 3.6.0 RC 2.

Ik neem aan dat ik er een nodig vergelijkbaar met het jullie gebruikt?


Is dit een goed of moet ik de enorme een jullie gebruikt, waar u de toegang blokkeren tot elk bestand per taal?


# Allow Archiver
User-agent: ia_archiver
Allow: /

User-agent: *
Disallow: /forum/*.js
Disallow: /forum/*.jsp
Disallow: /forum/*.cfm
Disallow: /forum/*.asp
Disallow: /forum/*.aspx
Disallow: /forum/*.cgi
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/install/
Disallow: /forum/customavatars/
Disallow: /forum/archive/
Disallow: /forum/attachments/
Disallow: /forum/ajax.php
Disallow: /forum/attachment.php
Disallow: /forum/admincp/
Disallow: /forum/calendar.php
Disallow: /forum/cron.php
Disallow: /forum/editpost.php
Disallow: /forum/global.php
Disallow: /forum/external.php
Disallow: /forum/image.php
Disallow: /forum/inlinemod.php
Disallow: /forum/joinrequests.php
Disallow: /forum/login.php
Disallow: /forum/billspaypal.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/moderator.php
Disallow: /forum/newattachment.php
Disallow: /forum/newreply.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/poll.php
Disallow: /forum/postings.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/report.php
Disallow: /forum/reputation.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showgroups.php
Disallow: /forum/subscription.php
Disallow: /forum/threadrate.php
Disallow: /forum/usercp.php
Disallow: /forum/usernote.php
Disallow: /forum/faq.php
Disallow: /forum/vbseo.php
Disallow: /forum/vbseocp.php
Disallow: /forum/vbseocpform.php
Disallow: /forum/chat.php

Sitemap: http://www.mydomain.com/forum/sitemap_index.xml.gz

[kamilkurczak]

hello,
U moet deze pagina's ook uit te schakelen van uw robots.txt-bestand.
Waarom?

Dit adres:

/forum/calendar.php
Hebben dezelfde inhoud als deze:

/forum/de/calendar.php
maar de url is anders en google indexeert deze url (deze pagina) ook.

U kunt gebruik maken van een robots.txt bestand uit ons voorbeeld (het volledige een is in de bijlage in dit bericht - onderste deel)
http://www.vbenterprisetranslator.com/forum/vbet4-general-discussions/408-vbet-performance.html

[norku]

Oke. Dank u. Ik zal dat nu veranderen. Ik gebruik de 8wayrun mediabibliotheek mod op mijn site. Media.php is op dit moment worden doorgestuurd naar / forum / media-library / Is er iets wat ik moet voorzichtig zijn met deze met betrekking tot de robots.txt en vertalingen? Ik kan beginnen met een nieuwe draad als je dat wilt?

[kamilkurczak]

Wij kunnen u een voorbeeld van een robots.txt (we al dezelfde gebruiken als deze).
Wilt u deze site uitgeschakeld voor google hebben -> blokkeren (u kunt url blok php site en om doorgestuurd deel aan -. Als dit permanent redirect) als dit is een 302 redirect (niet permanent) Blonk alleen url aan. php site.