谷歌拒绝索引由vBET创建的其他网址

[myandy99]

vBET 3.4.1
百度推广3.6
百度推广3.6.8
百度推广网站地图

我vBET和集成百度推广网站地图，在地图的网址显着增加，因为其他语言。但是，谷歌拒绝指数与以下消息发送给我上我的网站管理员工具网站其中大多数是：

Googlebot会发现在您的网站的网址的人数极多： http://xxxx.com/

Googlebot遇到的问题，同时抓取您的网站 http://xxxx.com/.

Googlebot遇到在您的网站链接的数量非常大。这可能表明您网站的网址结构的问题。 Googlebot可能不必要的被抓取的大量不同的网址指向相同或相似的内容，或爬行您的网站被Googlebot抓取的部分不打算。 Googlebot可能会因此消耗远远超过所需的带宽，或可能无法完全索引你的网站上的所有内容。

有关此问题的更多信息

下面是一个示例URL潜在的问题清单。然而，这个列表可能不包括所有在您的网站有问题的网址。

（注：列出的示例URL外语的网址（如 http://xxx.com/forums/no/something-something.html），他们正在努力的网址，不破网址）。

作为一个结果，而与vBET我通过网站地图提交比以前更加的URL（661934），谷歌，谷歌拒绝他们大多只有索引，其中44506。

详细的消息，解释为什么谷歌没有索引这些网址是像下面这样：

无法追踪网址
当我们测试您Sitemap中的URL的样本，我们发现某些URL重定向到其他位置。我们建议您的Sitemap包含网址指向的最终目的地，而不是重定向到另一个URL（重定向目标）。

HTTP错误：301
网址：
http://xxx.com/forums/sl/blah-blah-b...er-sample.html
上检测到的问题：2011年8月18日

如果不是谷歌指数我的网址，如果不是全部的？我读了本次论坛vBET增加基于Web的索引网址的好故事，从而带来额外的流量。这不是发生在我身上。

如何解决我的问题呢？

[kamilkurczak]

您好，
您可以在这里粘贴一个完整的邮件从谷歌吗？错误的URL的完整列表？如果你不想将其粘贴在这里 - 你可以点到我。我需要检查由谷歌注意到了这个链接 感谢

[myandy99]

只要PM'ed你。共2个项目经理，因为谷歌的消息是很长的。谢谢

[kamilkurczak]

您好，
我检查你的链接，和我没有注意到任何错误的URL和双重重定向。你可以粘贴在这里您的robots.txt文件的内容？
第二 - 使用谷歌浏览器工具（CTRL + SHIFT +镀铬十）我注意到一些错误 - 您可以检查它USNG谷歌Chrome浏览器。
（错误的请求，形象不符合= 404 400），你可以检查它。

我将试图找到为什么谷歌向您发送该消息。

其次。我注意到一些双郎页面URL中，例如： 所以有重定向的问题。确实您贝特与集成 vBSEO 正确吗？

[myandy99]

我想，我跟着指示整合百度推广vBET。你觉得我可能会错过呢？我仔细检查。

论坛/ NO / PL / photoplog是第三方vBulletin按付款当日价格计算的，它尚未与集成vBET（我不知道如何做到这一点），所以我并不感到意外看到奇怪的网址，vBET photoplog下。 Photoplog安装在站点的根目录，而不是论坛根，这样的网址确实应该是根/任何语言/ photoplog，不是根/论坛/任何语言/ photoplog。但无论如何，谷歌是抱怨我的定期论坛网址被太多问题。

这是我的robots.txt之前，我收到了Google的消息：

用户代理：思乐普

的User - agent：*
不允许：/论坛/ cron.php
不允许：/论坛/ login.php
不允许：/论坛/ newreply.php
不允许：/论坛/ newthread.php
不允许：/论坛/ printthread.php
不允许：/论坛/ private.php
不允许：/论坛/ profile.php
不允许：/论坛/ register.php
不允许：/论坛/ report.php
不允许：/论坛/ reputation.php
不允许：/论坛/ search.php
不允许：/论坛/ sendmessage.php
不允许：/论坛/ payments.php
不允许：/的cgi - bin / /论坛
不允许：/论坛/ /
不允许：/论坛/ living_avatars /
不允许：/论坛/ customavatars /
不允许：/论坛/ members.php
不允许：/论坛/ memberlist.php
不允许：/室友
不允许：/室友NOTUSED
3rdparty不允许：/ /
不允许：/ cgi - bin目录/
不允许：/班/
不允许：/ crons /
不允许：/职能/
不允许：/进口/
不允许：/包括/
不允许：/ JScript中/
不允许：/牌照/
不允许：/模块/
不允许：/主持人/
不允许：/ psystems /
不允许：/ SMARTY /
不允许：/温度/
不允许：/ AJAX /
不允许：/ news.php /
不允许：/论坛/成员/

网站地图： http://xxxx.com/forums/sitemap_index.xml.gz

这是我的robots.txt后，我收到了谷歌的消息（我加了禁止/论坛/语言/成员）

用户代理：思乐普

的User - agent：*
不允许：/论坛/ cron.php
不允许：/论坛/ login.php
不允许：/论坛/ newreply.php
不允许：/论坛/ newthread.php
不允许：/论坛/ printthread.php
不允许：/论坛/ private.php
不允许：/论坛/ profile.php
不允许：/论坛/ register.php
不允许：/论坛/ report.php
不允许：/论坛/ reputation.php
不允许：/论坛/ search.php
不允许：/论坛/ sendmessage.php
不允许：/论坛/ payments.php
不允许：/的cgi - bin / /论坛
不允许：/论坛/ /
不允许：/论坛/ living_avatars /
不允许：/论坛/ customavatars /
不允许：/论坛/ members.php
不允许：/论坛/ memberlist.php
不允许：/室友
不允许：/室友NOTUSED
3rdparty不允许：/ /
不允许：/ cgi - bin目录/
不允许：/班/
不允许：/ crons /
不允许：/职能/
不允许：/进口/
不允许：/包括/
不允许：/ JScript中/
不允许：/牌照/
不允许：/模块/
不允许：/主持人/
不允许：/ psystems /
不允许：/ SMARTY /
不允许：/温度/
不允许：/ AJAX /
不允许：/ news.php /
不允许：/论坛/成员/
不允许：/论坛/ AF /成员/
不允许：/论坛/平方米/成员/
不允许：/论坛/ AR /会员/
不允许：/论坛/ HY /成员/
不允许：/论坛/ AZ /成员/
不允许：/论坛/欧盟/成员/
不允许：/论坛/ /成员/
不允许：/论坛/ BG /会员/
不允许：/论坛/ CA /会员/
不允许：/论坛/ ZH - CN /成员/
不允许：/论坛/人力资源/成员/
不允许：/论坛/ CS /成员/
不允许：/论坛/ DA /成员/
不允许：/论坛/ NL /成员/
不允许：/论坛/ EN /成员/
不允许：/论坛/ ET /成员/
不允许：/论坛/ TL /成员/
不允许：/论坛/ FI /成员/
不允许：/论坛/ FR /成员/
不允许：/论坛/ GL /成员/
不允许：/论坛/ KA /成员/
不允许：/论坛/ DE /成员/
不允许：/论坛/ EL /成员/
不允许：/论坛/ HT /成员/
不允许：/论坛/ IW /会员/
不允许：/论坛/您好/会员/
不允许：/论坛/胡/会员/
不允许：/论坛/ /成员/
不允许：/论坛/ ID /成员/
不允许：/论坛/ GA /成员/
不允许：/论坛/ /成员/
不允许：/论坛/ JA /成员/
不允许：/论坛/高/成员/
不允许：/论坛/ LV /成员/
不允许：/论坛/ LT /成员/
不允许：/论坛/ MK /会员/
不允许：/论坛/ MS /成员/
不允许：/论坛/吨/成员/
不允许：/论坛/无/成员/
不允许：/论坛/ FA /成员/
不允许：/论坛/ PL /成员/
不允许：/论坛/ PT /成员/
不允许：/论坛/ RO /成员/
不允许：/论坛/ RU /成员/
不允许：/论坛/ SR /成员/
不允许：/论坛/ SK /成员/
不允许：/论坛/ SL /成员/
不允许：/论坛/ ES /会员/
不允许：/论坛/ SW /成员/
不允许：/论坛/ SV /成员/
不允许：/论坛/ ZH - TW /成员/
不允许：/论坛/日/会员/
不允许：/论坛/ TR /成员/
不允许：/论坛/英国/会员/
不允许：/论坛/ UR /成员/
不允许：/论坛/ VI /成员/
不允许：/论坛/ CY /成员/
不允许：/论坛/义/成员/
不允许：/论坛/ member.php
不允许：/论坛/ AF / member.php
不允许：/论坛/平方米/ member.php
不允许：/论坛/ AR / member.php
不允许：/论坛/ HY / member.php
不允许：/论坛/ AZ / member.php
不允许：/论坛/欧盟/ member.php
不允许：/论坛/ / member.php
不允许：/论坛/ BG / member.php
不允许：/论坛/ CA / member.php
不允许：/论坛/ ZH - CN / member.php
不允许：/论坛/小时/ member.php
不允许：/论坛/ CS / member.php
不允许：/论坛/ DA / member.php
不允许：/论坛/ NL / member.php
不允许：/论坛/ EN / member.php
不允许：/论坛/ ET / member.php
不允许：/论坛/ TL / member.php
不允许：/论坛/ FI / member.php
不允许：/论坛/ FR / member.php
不允许：/论坛/ GL / member.php
不允许：/论坛/ KA / member.php
不允许：/论坛/ DE / member.php
不允许：/论坛/ EL / member.php
不允许：/论坛/ HT / member.php
不允许：/论坛/ IW / member.php
不允许：/论坛/高/ member.php
不允许：/论坛/胡/ member.php
不允许：/论坛/ / member.php
不允许：/论坛/ ID / member.php
不允许：/论坛/ GA / member.php
不允许：/论坛/ / member.php
不允许：/论坛/ JA / member.php
不允许：/论坛/高/ member.php
不允许：/论坛/ LV / member.php
不允许：/论坛/ LT / member.php
不允许：/论坛/ MK / member.php
不允许：/论坛/ MS / member.php
不允许：/论坛/吨/ member.php
不允许：/论坛/无/ member.php
不允许：/论坛/ FA / member.php
不允许：/论坛/ PL / member.php
不允许：/论坛/ PT / member.php
不允许：/论坛/ RO / member.php
不允许：/论坛/ RU / member.php
不允许：/论坛/ SR / member.php
不允许：/论坛/ SK / member.php
不允许：/论坛/ SL / member.php
不允许：/论坛/ ES / member.php
不允许：/论坛/ SW / member.php
不允许：/论坛/ SV / member.php
不允许：/论坛/ ZH - TW / member.php
不允许：/论坛/日/ member.php
不允许：/论坛/ TR / member.php
不允许：/论坛/英国/ member.php
不允许：/论坛/ UR / member.php
不允许：/论坛/ VI / member.php
不允许：/论坛/ CY / member.php
不允许：/论坛/义/ member.php
不允许：/论坛/ HY / member.php
不允许：/论坛/ AZ / member.php
不允许：/论坛/欧盟/ member.php
不允许：/论坛/ KA / member.php
不允许：/论坛/ UR / member.php

网站地图： http://xxxx.com/forums/sitemap_index.xml.gz

[kamilkurczak]

从这里你可以检查我们的机器人文件
http://www.vbenterprisetranslator.co....html＃post1178

[vBET]

嗨。我刚才发布的信息，以卡米尔提出我的下午。正如我看到的问题是由URL中的双语言代码引起的 - 这就是为什么你从 谷歌的电子邮件 - 你有很多的URL相同的内容。

首先 - 这些链接不 应该创建。原因就在这里可没有集成的插件。

下一步甚至如果这些URL创建vBET假设以了解它和重定向。重定向不发生在你的论坛，这就是问题所在。我不知道为什么它不重定向 - vBET错误或因为您使用的是它不正式支持vBulletin版本。 vBET 3.x是vBulletin 3.8中，您使用vBulletin 3.6。我需要检查它在地方。请PM我您的管理员控制面板和FTP访问的细节。

[myandy99]

只是PM'ed你

[vBET]

“确定” - 现在我看到真正的问题 - photoplog链接不应该包括/论坛。这是融合的问题 - 你没有作出任何一体化的努力和链接是相对的不是绝对的，所以vBET假设它仍然是论坛的链接。

你没有看到它是如何促成了谷歌的投诉，但我看到了。每一个环节（最）包含有翻译的环节 - 每一个翻译的页面中包含断开的链接photoplog（如域名/论坛/ PL / photoplog / index.php的波兰语翻译的每一页上包含）。因此，每个翻译的页面中包含链接到重复的内容，因为根据这些损坏的链接，你有photoplog页，其中包括主论坛网页内容。

我只被添加 photoplog 对忽略 Url，因此贝特将不会再生成的 photoplog 这种断开的链接。它将更好地集成，并有它还翻译，但它不受免费的支持。请打开新的线程中帮助集成部分-仍将是棘手如果可能在所有，因为您已加 vBSEO 规则-所以最可能标准的集成提示将不足。通过我们的工作人员使一体化有偿服务和 it 成本 30 元 （http://www.vbenterprisetranslator.co...on-service.php).

因此，实际的解决方案保持您photoplog页vBET系统解决了这个问题。损坏的链接不会产生了，并已确认由Google断开的链接将被重定向，以便链接一样：
DOMAIN/forums/pl/photoplog/gallery-view-3.html
将被重定向到：
DOMAIN/forums/photoplog/gallery-view-3.html

所以你还是需要添加htaccess的规则，将这样的请求重定向到：。DOMAIN/photoplog/gallery-view-3.html
这已经是出vBET系统（vBET现在忽略您的论坛photoplog） - 这是因为您的论坛允许这种断开的链接。

这应该解决的问题 - 我没有看到任何其他异常情况。如果你这样做 - 请让我们知道。请特别注意你的论坛目录以外的所有的链接 - 检查的翻译之后，这些都是正确的。这些应该是绝对的，否则vBET会看到类似的论坛内容的一部分，并有添加翻译跟踪。如果它是生成使用vBulletin引擎跟踪翻译论坛目录，并支持翻译之外的网页有可能，但它需要整合 - 默认vBET翻译论坛。

请告诉你在这方面需要更多的帮助。

PS。
更多的异常，但不相关vBET - 谷歌显示贺卡页面的几个环节，去那里后，我看到后重定向，但其他URL相同的网页内容，请确保重定向发送适当的头，告诉的内容不存在。

[vBET]

在下午回答你的问题，为什么你曾警告有关页面现在是完全确定的。

可能的原因：
1。它有重复内容的链接（错误photopost每个你翻译网页上的链接之前，我们所做的更改）
2。当谷歌第一次来到那里，你可以用谷歌翻译本身的问题 - 如超过配额，或暂时阻止您的服务器，或传出请求暂时阻止谷歌翻译API本身（其他原因比翻译） - 因此，如果发生了那些反对当谷歌机器人访问你不缓存尚未页，然后机器人只看到所有文本空白（翻译的结果是每一个翻译的空字符串）的布局 - 让所有网页是相同的，那么。

不能告诉没有发生，但这些都是我们现在看到的可能原因。另请注意，现在当你的缓存填满它是不太可能的，你将超越Google翻译API配额（设置一段时间 - 公布后，谷歌翻译API将会封闭）的。

在这个非常时刻，我们没有看到任何问题与你的URL的其余部分。如果你看到任何问题，请让我们知道，我们将立即作出反应，以帮助您。在这一刻，它看起来罚款。你这个问题需要更多的帮助吗？