User-agent: * Allow: / Disallow: /admin/ # блокирует доступ к страницам Disallow: /old/ # блокирует доступ к страницам