Podíval jsem se na zástupné znaky v robots.txt (protože podle mé předchozí zkušenosti, že by neměly být v robots.txt) a našel článek, který říká, že by to mělo fungovat:
Code:
http://seogadget.co.uk/wildcards-in-robots-txt/
Přesto jsem našel velmi zajímavý autorů věta:
Některé SEO nesouhlasí s použitím zástupných znaků, nebo alespoň vidí jako poněkud riskantní, nebo daleko od osvědčených postupů.
Já budu dělat nějaké další výzkum v této oblasti.
Upravovat.
Tady jsem našel víc o zástupný znak v robots.txt:
Code:
http://tools.seobook.com/robots-txt/
- Podle informací, že Google a Yahoo umožňuje používat zástupné znaky.
Still - Ujistěte se, že nejste blokování všech přeložený obsahu v některých zástupných pravidla. Prosím, pomocí Nástrojů pro webmastery určení (nejprve vBET znovu spustit). Jak napsal autor posledního uvedeného článku:
Zvažte související URL Používáte-li Robots.txt zástupné znaky: Náhodou jsem se náklady přes $ 10,000 na zisku s jedním robots.txt Chyba!