Как создать robots.txt для WordPress?

все четко и доступно... у меня он есть, но решила еще перечитать — вдруг что упустила...:)

Файл правильный! Блог действительно хороший. Но есть один большой и жирный минус, который Денис сам к себе располагает — это рассылка спама. В первую очередь о чем говорит — неуважение к остальным блогам и их авторам.

Как мне не хотелось лезть к корневую папку, но путь /domains/Ваш блог/robots.txt так и не смогла найти. Можно поподробней после соединения с хостом?И можно ли активировать файл robots.txt не заходя в корневую папку?

Денис, это только со мной может быть!!!! Я помню, что в самый первый день закидывала этот файл на хостинг в папку. А сейчас смотрю в этой папке нет этого файла, как такое может быть? Вот сейчас поставила по твоему, вроде есть. А что же теперь с дублями статей делать? удалять? тогда где их искать в вордпрессе, если я черновики все удалила, остались только оригиналы?

Здравствуйте Денис! Столкнулся с неожиданной проблемой, при установке нового движка WordPress, появился встроенный robots.txt -вот он родной-User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/. Я не могу его найти, есть подозрение что это functions.php. Как его можно поменять на свой?

Денис я нашел где собака зарыта:/www/wp-includes/functions.php
А вот и причина-
function do_robots () {
header ( 'Content-Type: text/plain; charset=utf-8' );
do_action ( 'do_robotstxt' );
$output = «User-agent: *\n»;
$public = get_option ( 'blog_public' );
if ( '0' == $public ) {
$output .= «Disallow: /\n»;
} else {
$site_url = parse_url ( site_url () );
$path = ( !empty ( $site_url['path'] ) ) ? $site_url['path'] : '';
$output .= «Disallow: $path/wp-admin/\n»;
$output .= «Disallow: $path/wp-includes/\n»;
}
echo apply_filters ('robots_txt', $output, $public);
}
/**
Теперь нужно искать как решить проблему.

Поставил ваш роботс на свой сайт и сразу в гугл адсенс выскочило собщение что я запретил роботу индексировать свои страницы. Мой роботс http: //www.softzatak.ru/robots.txt Подскажите плиз что не так?