Robots.txt untuk vBSEO-enabled forum berjalan vBET 4.2.3

[norku]

Saya telah mencari dan mencari tetapi tidak dapat menemukan tips tentang isi dari robots.txt saya. Aku sedang menjalankan vBET 4.2.3 vBSEO 3.6.0 RC dengan 2.

Saya berasumsi bahwa saya perlu satu sama dengan yang kalian gunakan?


Apakah ini baik-baik saja atau apakah saya perlu yang besar kalian gunakan di mana Anda memblokir akses ke setiap file dengan bahasa?

# Allow Archiver
User-agent: ia_archiver
Allow: /

User-agent: *
Disallow: /forum/*.js
Disallow: /forum/*.jsp
Disallow: /forum/*.cfm
Disallow: /forum/*.asp
Disallow: /forum/*.aspx
Disallow: /forum/*.cgi
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/install/
Disallow: /forum/customavatars/
Disallow: /forum/archive/
Disallow: /forum/attachments/ 
Disallow: /forum/ajax.php
Disallow: /forum/attachment.php
Disallow: /forum/admincp/
Disallow: /forum/calendar.php
Disallow: /forum/cron.php
Disallow: /forum/editpost.php
Disallow: /forum/global.php
Disallow: /forum/external.php
Disallow: /forum/image.php
Disallow: /forum/inlinemod.php
Disallow: /forum/joinrequests.php
Disallow: /forum/login.php
Disallow: /forum/billspaypal.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/moderator.php
Disallow: /forum/newattachment.php
Disallow: /forum/newreply.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/poll.php
Disallow: /forum/postings.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/report.php
Disallow: /forum/reputation.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showgroups.php
Disallow: /forum/subscription.php
Disallow: /forum/threadrate.php
Disallow: /forum/usercp.php
Disallow: /forum/usernote.php
Disallow: /forum/faq.php
Disallow: /forum/vbseo.php
Disallow: /forum/vbseocp.php
Disallow: /forum/vbseocpform.php
Disallow: /forum/chat.php

Sitemap: http://www.mydomain.com/forum/sitemap_index.xml.gz 

[kamilkurczak]

halo,
Anda harus menonaktifkan halaman dari file robots.txt Anda juga.
Mengapa?

Alamat ini:

/forum/calendar.php

Memiliki konten yang sama seperti ini:

/forum/de/calendar.php

tapi url yang berbeda dan google akan mengindeks url ini (halaman ini) juga.

Anda dapat menggunakan file robots.txt dari contoh kita (yang penuh dalam lampiran di posting ini - bagian bawah)
http://www.vbenterprisetranslator.co...rformance.html

[norku]

Oke. Terima kasih. Aku akan mengubah itu sekarang. Saya menggunakan perpustakaan media 8wayrun mod di situs saya. Media.php diarahkan saat ini untuk / forum / media-perpustakaan / Apakah ada sesuatu yang saya harus hati-hati dengan ini dalam hal robots.txt dan terjemahan? Aku dapat memulai thread baru jika Anda suka?

[kamilkurczak]

Kami dapat memberikan Anda sebuah contoh dari robots.txt (kita sudah menggunakan yang sama seperti ini).
Jika Anda ingin memiliki situs dinonaktifkan untuk google -> blok itu (Anda dapat memblokir url ke situs php dan untuk diarahkan bagian untuk -. Jika ini adalah redirect permanen) jika ini adalah url redirect Blonk 302 (tidak permanen) hanya untuk. php situs.