Простой и быстрый способ проверить количество проиндексированных страниц в Яндекс и Google - это использовать оператор site:[домен сайта] (в квадратных скобках нужно указать свой домен).
Более правильным и точным вариантом будет изучение отчетов Вебмастера Яндекс и Google Search Console.
У Яндекса и Google различные алгоритмы занесения и принципы хранения страниц в индексе (базе поисковой системы). Поэтому при проверке сайта вы можете увидеть разные данные о проиндексированных страницах.
Также различается сама скорость индексации: в Google этот процесс происходит гораздо быстрее.
В файле robots.txt, который располагается в корневой директории сайта прописаны инструкции для робота поисковой системы. Например, команда Disallow: /recipe/search/ закрывает от индексации страницы, которые идут после слеша.
Как на это реагирует робот Яндекса? Он не индексирует эти страницы, не заносит их базу и не включает в общее количество проиндексированных страниц.
Как на это реагирует робот Google? Он не индексирует содержимое страницы, но сама страница будет добавлена в счетчик, т.е. будет считаться проиндексированной. И может показываться в поиске, если робот посчитает ее полезной.
Подобных факторов, влияющих на количество страниц в индексе много. Из-за различия «взглядов» роботов поисковых систем на эти факторы и получается разница в данных.
Другие вопросы раздела