User-agent: YandexNews
Allow: /rss
Crawl-delay: 0.1

User-agent: *
Allow: /
Disallow: /admin
Disallow: /phpmyadmin
Disallow: /detigray
Disallow: /index.php
Sitemap: http://deti.gov.ru/sitemap.xml

#последняя строка должна быть пустой