Putem să vă dau un exemplu de robots.txt (folosim deja la fel ca aceasta).
Dacă doriţi să aveţi acest site dezactivat pentru google -> pe categorii, (îi puteţi bloca url la site-ul php şi a redirecţionat o parte pentru a -. În cazul în care acest lucru este permanent redirecţionare), în cazul în care aceasta este o redirecţionare 302 (nu permanent) url blonk numai. php site-ului.