Здравствуйте
 
Я понимаю что подобных тем на форму полно но они помоему уже устарели.
 
Инфу для роботcа гугла и компании брал отсюда: https://awayne.biz/pravilnyy-robots-txt-dlya-wordpress/,  https://wp-kama.ru/id_803/pishem-pravilnyiy...-wordpress.html
 
Я пока сделал вот такой роботс для гугла и других измени на "правильный" для 2019 года для яндекса оставил старые правила:
 
Что думаете по поводу такого robots.txt для вордпресс он правильный? Стоит ли для яндекс-робота создать такие же правила? Или лучше как в примерах на сайте камы и т.д для каждого писать отдельно?
 
User-agent: *
Disallow: /cgi-bin          
Disallow: /?                
Disallow: /wp-              
Disallow: *?s=              
Disallow: *&s=              
Disallow: /search           
Disallow: /author/          
Disallow: *?attachment_id=  
Disallow: */feed            
Disallow: */rss             
Disallow: */embed           
Disallow: */page/
Disallow: /*go.php  
Disallow: /*?*
Disallow: /tag/
Disallow: /xmlrpc.php
Disallow: */trackback
Disallow: */*/trackback
Allow: */uploads            
Allow: /*/*.js              
Allow: /*/*.css             
Allow: /wp-*.png            
Allow: /wp-*.jpg            
Allow: /wp-*.jpeg           
Allow: /wp-*.gif            
Allow: /wp-*.svg            
Allow: /wp-*.pdf            
 
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-feed
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /xmlrpc.php
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag/
Disallow: /*go.php
 
Host: 
Sitemap: 
 
После изменений для гугла он перестал ругаться на мобильную версию сайта как было ранее, потому что он не могу получить доступ к файлам.
Что думаете по поводу такого robots.txt для вордпресс он правильный?


Сообщение отредактировал Sosnovskij - 14.3.2019, 14:48