User-agent: Yandex Allow: / Sitemap: http://www.topcomputer.ru/sitemap.xml User-agent: Googlebot Allow: / Sitemap: http://www.topcomputer.ru/sitemap.xml User-agent: Yandex Disallow: /*/admin/ # запрещает все подпути содержащие '/admin/' User-agent: Googlebot Disallow: /*/admin/ # запрещает все подпути содержащие '/admin/' User-agent:* Crawl-delay: 120 User-agent: * Crawl-delay: 120