На данный момент занимаюсь разработкой приложения для массовой оценки SEO параметров сайтов. Меня интересует какими точно операторами (и для Яндекса, и для Google) можно узнать проиндексирована ли конкретная страница. Я раньше думал что это можно делать с помощью оператора site:. Но представим следующую ситуацию. Есть сайт, содержащий следующие страницы:

http://site.ru/section1/
http://site.ru/section1/page1.html
http://site.ru/section1/page2.html

Допустим, мы вводим (в одной из ПС) запрос site:http://site.ru/section1/ . При этом в выдаче будет не только страница http://site.ru/section1/ , то и ее подстраницы, содержащие ее URL в своем (конечно если они проиндексированы):

http://site.ru/section1/
http://site.ru/section1/page1.html
http://site.ru/section1/page2.html

С одной стороны, можно определять индексацию по наличию элементов в выдаче по запросу site:. Но если в данной ситуации основная страница проиндексирована не будет, а отсальные будут:

http://site.ru/section1/page1.html
http://site.ru/section1/page2.html

Что делать тогда? Я подумал что можно проверять первый элемент выдачи - совпадает ли его ссылка с проверямой страницей. Однако на тестируемом мною сайте в Яндексе была следующая картина при запросе site:http://site.ru/section1/:

http://site.ru/section1/page1.html
http://site.ru/section1/
http://site.ru/section1/page2.html

В Google же основная страница http://site.ru/section1/ была на первом месте, но не факт что это так в 100% случаев. Я уже думаю, что для того чтобы найти золотую середину (между ресурсами необходимыми для проверки и ее точностью) - оценивать первые 10 результатов и искать в них точную ссылку на проверямую страницу. А что скажете вы?