Robots.txt for vBSEO-aktiverte forumet kjører Vbet 4.2.3

[norku]

Jeg har vært på leting og søker, men kan ikke finne tips på innholdet i robots.txt min. Jeg kjører Vbet 4.2.3 med vBSEO 3.6.0 RC 2.

Jeg antar at jeg trenger en som ligner på den dere bruker?


Er dette en ok eller trenger jeg den enorme dere bruker hvor du blokkere tilgang til hver fil via språk?


# Allow Archiver
User-agent: ia_archiver
Allow: /

User-agent: *
Disallow: /forum/*.js
Disallow: /forum/*.jsp
Disallow: /forum/*.cfm
Disallow: /forum/*.asp
Disallow: /forum/*.aspx
Disallow: /forum/*.cgi
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/install/
Disallow: /forum/customavatars/
Disallow: /forum/archive/
Disallow: /forum/attachments/
Disallow: /forum/ajax.php
Disallow: /forum/attachment.php
Disallow: /forum/admincp/
Disallow: /forum/calendar.php
Disallow: /forum/cron.php
Disallow: /forum/editpost.php
Disallow: /forum/global.php
Disallow: /forum/external.php
Disallow: /forum/image.php
Disallow: /forum/inlinemod.php
Disallow: /forum/joinrequests.php
Disallow: /forum/login.php
Disallow: /forum/billspaypal.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/moderator.php
Disallow: /forum/newattachment.php
Disallow: /forum/newreply.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/poll.php
Disallow: /forum/postings.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/report.php
Disallow: /forum/reputation.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showgroups.php
Disallow: /forum/subscription.php
Disallow: /forum/threadrate.php
Disallow: /forum/usercp.php
Disallow: /forum/usernote.php
Disallow: /forum/faq.php
Disallow: /forum/vbseo.php
Disallow: /forum/vbseocp.php
Disallow: /forum/vbseocpform.php
Disallow: /forum/chat.php

Sitemap: http://www.mydomain.com/forum/sitemap_index.xml.gz

[kamilkurczak]

hello,
Du bør å deaktivere denne sider fra robots.txt-filen også.
Hvorfor?

Denne adressen:

/forum/calendar.php
Har samme innhold som dette:

/forum/de/calendar.php
men url er forskjellige og google vil indeksere denne url (denne siden) også.

Du kan bruke en robots.txt-fil fra vårt eksempel (full man er i vedlegget i dette innlegget - nedre del)
http://www.vbenterprisetranslator.com/forum/vbet4-general-discussions/408-vbet-performance.html

[norku]

Okay. Takk. Jeg skal endre det nå. Jeg bruker 8wayrun mediebiblioteket mod på nettstedet mitt. Media.php er omdirigert tiden til / forum / media-bibliotek / Er det noe jeg må være forsiktig med med denne med hensyn til robots.txt og oversettelser? Jeg kan starte en ny tråd hvis du liker?

[kamilkurczak]

Vi kan gi deg et eksempel på robots.txt (vi allerede bruker det samme som denne).
Hvis du ønsker å ha dette nettstedet deaktivert for google -> blokkere den (du kan blokkere url til php nettstedet og for å omdirigert del til -. Om dette er permanent redirect) hvis dette er en 302 redirect (ikke permanent) Blonk bare url til. php nettsted.