Re: de edderkopper, jeg forstår det, men Baidu edderkopper bringe lidt trafik, men virkelig lort overalt dine ressourcer, så jeg nu forbud mod de fleste kinesiske og andre nonsens edderkopper:
Baidu
Ichiro Mobil
Soso
Sogou
PSbot
Yandex (russian yahoo)
Yeti
spinn3r
.... Jeg kunne blive ved

Tja, hvis jeg ikke får netop disse oversættelser tilbage Jeg bliver nødt til at gå betalt, men min oversættelse .. osv. allerede tegner sig for næsten 12 millioner URL'er og en masse af mine sider har en masse indhold, så jeg kan se mig dumping støtte til resten af verden på mit fora, hvilket er virkelig en skam. Jeg har bare fjernet mine cacher (gæst og database) og fik 9 GB plads tilbage!