Robots.txt для WordPress
В WordPress есть определенное количество «служебных» файлов и папок, попадание в индекс которых не желательно по ряду объективных причин. Чтобы «спрятать» их от роботов поисковых систем, нужно использовать файл robots.txt о котором и пойдет речь в посте. Структура папок в WordPress практически не меняется от версии к версии, поэтому описанные ниже данные подойдут для большинства блогов.
