User-agent: *
Disallow: /cgi-bin
# запрещаем индексацию системных папок
Disallow: /admin
Disallow: /lang
Disallow: /language
Disallow: /resource
Disallow: /templates
Disallow: /templates_c
Disallow: /widgets
# запрещаем индексацию страницы входа и регистрации
Disallow: /admin/index.php
# запрещаем индексацию трекбеков, rss-ленты
Disallow: /trackback
Disallow: /feed
Disallow: /rss
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: /xmlrpc.php

# запрещаем индексацию постраничных комментариев
Disallow: */comments
Disallow: */comment-page*
# запрещаем индексацию результатов поиска и другого возможного "мусора"
Disallow: /*?*
Disallow: /*?
# разрешаем индексацию файлов
Allow: /uploads