Если сайт уже существует и поисковые роботы давно по нему ходят, то есть определённое количество страниц, которые уже есть в индексе — то есть отображаются в поисковой выдаче.
И очень важно понять, все ли там нужные страницы, и нет ли там ненужных страниц. Как правило, к ненужным относятся технические и сервисные страницы, страницы админ-панели, страницы логина. Такие страницы часто не должны отображаться в поиске и лучше их исключить, так как поисковик может снижать поисковые позиции вашего сайта, если он видит страницы, которые забиты мусорной или сугубо технической информацией, не несущей смысловой нагрузки.
Есть 2 способа понять, какие же страницы вашего сайта уже есть в поиске.
1) Через Яндекс Вебмастер
Заходите в Вебмастер. Индексирование — Страницы в поиске.
На вкладке «Все страницы» вы сможете увидеть список всех страниц, у каждой отображается URL и заголовок.
2) Непосредственно в поиске
Особенно если сайт небольшой, вы сможете не только быстро просмотреть все страницы в индексе, но и быстро оценить сниппеты — как в поиске отображается заголовок и описание каждой страницы. Это позволит понять, какие страницы ненужные и их стоило бы закрыть от индексации и убрать из поиска.
Итак, чтобы быстро проверить все страницы в поиске, введите в поисковой строке Яндекса site:mysite.ru, где mysite.ru — адрес вашего сайта.
При введении такого поискового запроса поиск выдаст только страницы вашего сайта, ничего другого не будет отвлекать от того, чтобы просмотреть, что же там представлено в поиске.