Да, почти именно для этого.

Яндекс прочитает свои директивы, и съест их по своим правилам.

Другие поисковики пропустят часть User-agent: Yandex, и обработают только более универсальные директивы, и ничего лишнего для них не будет

По моему оптимально правильный вариант будет...
Нет. Яндекс съест свою часть, и дальше обрабатывать уже не пойдёт (т.к. по логике нашёл всё, что предназначалось именно для него). Но на 100% не уверен.

Если так уж интересно - в ЯWM проверяется на лету. Сам не проверял, но в Вашем случае советую поэкспериментировать, если так интересно.

Так что правильно во всех популярных CMS формируется robots.txt. От греха подальше. А лишние строки в robots в наше время ни на что не влияют, кроме пары миллисекунд (или микросекунд).

Согласен. Но дело принципа. И вы оказались правы. Протестировал в ЯВМ. Яндекс "кушает" только директивы которые выделены для него.
Вопрос закрыт.

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.