Re: păianjeni, dar am înţeles că păianjenii Baidu aduce trafic redus, dar cu adevărat rahat peste tot resursele tale, aşa că am interdicţie acum păianjeni majoritatea chinezilor şi alte prostii:
Baidu
Ichiro Mobile
Soso
Sogou
PSbot
Yandex (rusă yahoo)
Yeti
spinn3r
.... i-ar putea merge pe

Ei bine, dacă nu primesc aceste traduceri special înapoi voi trebuie să merg plătite, dar traducerile mele .. etc deja în considerare pentru aproape 12 milioane de adrese URL şi o mulţime de pagini mele au o mulţime de conţinut, astfel încât i se poate vedea mă sprijin de dumping pentru restul lumii la forumuri mea, care este un păcat. Am eliminat doar cache meu (clienţilor şi de baze de date) şi s-au 9 GB de spaţiu înapoi!