User-agent: *
Disallow: /cgi-bin

# запрещаем индексацию системных папок
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes

# запрещаем индексацию страницы входа и регистрации
Disallow: /wp-login.php
Disallow: /wp-register.php

# запрещаем индексацию трекбеков, rss-ленты, комментариев
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /xmlrpc.php

# запрещаем индексацию результатов поиска и другого “мусора”
Disallow: /*?*
Disallow: /*?

# прописываем директиву Host
Host: www.droidnews.ru
User-agent: *

# запрещаем индексацию системных папок
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes

# запрещаем индексацию страницы входа и регистрации
Disallow: /wp-login.php
Disallow: /wp-register.php

# запрещаем индексацию трекбеков, rss-ленты, комментариев
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: /xmlrpc.php
Disallow: /podkasty

# запрещаем индексацию результатов поиска и другого “мусора”
Disallow: /*?*
Disallow: /*?
Disallow: /2010
Disallow: /tag/*

# указываем на карту сайта
Sitemap: http://droidnews.ru/sitemap.xml