Случайно попаднахме на файла на Google съдържащ инструкции за поведение спрямо роботите в мрежата. Останахме шашнати или по скоро приятно усмихнати.

В robots.txt на търсачката можете да видите какви са инструкциите ...

Ето ви и един screenshot: