Почему сайт не виден в поиске: 12 причин и что делать
Коротко: почему сайта может не быть в выдаче
Ситуация «сделали сайт, а его нигде нет» пугает, но причина почти всегда сводится к одному из трёх сценариев. Либо сайт вообще не пустили в индекс — и тогда его физически нет в базе поисковика. Либо он в индексе есть, но болтается так глубоко, что вы до него не долистываете. Либо он словил фильтр. Ниже двенадцать конкретных причин, от самых частых и быстрых в исправлении к более тяжёлым.
Прежде чем читать дальше, сделайте одну вещь — она сэкономит вам полчаса. Вбейте в Яндекс и в Google команду site:вашсайт.ru. Если в ответ ноль страниц — значит, сайт не индексируется, и вам в причины с первой по шестую. Если страницы находятся, а по обычным запросам вас всё равно не видно — дело в ранжировании или фильтрах, это причины с седьмой по двенадцатую. Дальше разберём каждую.
1. Сайт целиком закрыт в robots.txt
Начнем с самой обидной, потому что встречается она чаще всего и лечится за минуту. После разработки в файле robots.txt частенько забывают убрать строчку Disallow: /. Одна короткая строка — и она запрещает роботам обходить вообще весь сайт. Внешне всё прекрасно: сайт открывается, дизайн на месте, формы работают. А для поиска его просто нет.
Как проверить: откройте в браузере вашсайт.ru/robots.txt и посмотрите глазами. Увидели Disallow: / без уточнений — вот она, причина. Как исправить: убрать эту строку и оставить закрытыми только то, что действительно должно быть закрыто, — админку, корзину, страницы с параметрами. После правки не забудьте переотправить robots.txt в Вебмастере, чтобы ускорить переобход.
2. На страницах висит метатег noindex
Это близкий родственник предыдущей проблемы, тоже родом с этапа разработки. Тег <meta name="robots" content="noindex"> прямым текстом говорит поисковику: эту страницу в индекс не бери. Пока сайт на тестовом домене, такой тег ставят намеренно, чтобы черновик не попал в выдачу. А при переезде на боевой домен снять его забывают — и весь свежий сайт остаётся невидимым.
Как проверить: прогоните сайт Screaming Frog и посмотрите колонку Meta Robots, либо откройте код любой страницы (Ctrl+U) и поищите слово noindex в секции head. Как исправить: убрать noindex со всех страниц, которые должны приводить трафик. Оставить его можно и нужно только на служебных — вроде страницы «спасибо за заявку».
3. Сайт ещё слишком молодой
Иногда сайт не виден просто потому, что он новый. Поисковику нужно время, чтобы его найти, обойти, оценить и решить, куда поставить. Первые недели, а порой и месяц-другой, молодой домен может почти не показываться — и это не поломка, а нормальный ход событий. Здесь главное не паниковать и не начинать «чинить» то, что не сломано.
Ускорить процесс реально. Добавьте сайт в Яндекс.Вебмастер и Google Search Console и подтвердите права. Отправьте туда sitemap. Попросите поисковик обойти ключевые страницы вручную через инструмент переобхода. И постарайтесь получить первые внешние ссылки — упоминания в каталогах, соцсетях, у партнёров: по ним робот быстрее до вас доберётся.
4. Страниц нет в sitemap.xml — или его вообще нет
Карта сайта — это подсказка роботу, какие страницы у вас есть и что стоит обойти. Когда её нет или в ней перечислена половина сайта, часть разделов индексируется медленно, а часть не индексируется совсем. Особенно это бьёт по крупным сайтам с большим числом страниц, где без карты бот банально не находит всё.
Как проверить: откройте вашсайт.ru/sitemap.xml и убедитесь, что файл есть и в нём перечислены все значимые URL. Заодно гляньте на даты lastmod — если у всех страниц стоит одна и та же сегодняшняя дата, это подозрительно и поисковику не помогает. Как исправить: сгенерировать полную и честную карту, включить в неё все важные страницы и отправить её в оба вебмастера.
5. Ошибки с тегом canonical
Canonical сообщает поисковику, какую версию страницы считать основной. Инструмент полезный, но именно на нём совершают одну грубую ошибку, которая тихо убивает индексацию. Бывает, что все страницы сайта каноникалят на главную. Тогда поисковик решает, что продуктовые, категорийные и все прочие внутренние страницы — это копии главной, и выбрасывает их из индекса. Сайт вроде большой, а в поиске от него остаётся одна страница.
Ловится это быстро: у каждой уникальной страницы canonical должен ссылаться сам на себя, а не на главную и не на соседнюю. Смотрите через Screaming Frog или прямо в коде. Дальше — настроить самоссылающиеся canonical для всех уникальных страниц, а на главную оставить только реальные дубли.
6. Технические ошибки: коды ответов и доступность
Поисковик — существо недоверчивое. Страница, которая должна работать, вдруг отдаёт 404? Сервер регулярно валится с 5xx? Робот перестаёт такой странице доверять и со временем убирает из индекса. Сюда же — медленная загрузка: у бота на каждый сайт выделен ограниченный краулинговый бюджет, и если страницы открываются вечность, он успевает обойти лишь часть.
Чтобы это увидеть, пройдитесь по сайту Screaming Frog и гляньте коды ответов — всё, что должно работать, должно отдавать 200. Заодно загляните в Search Console, в отчёт об индексировании: там прямо перечислены проблемные страницы и причины. А лечение очевидное — убрать ложные 404, разобраться с серверными ошибками, ускорить отдачу.
7. Сайт в индексе, но ранжируется слишком низко
А вот здесь начинается самая частая путаница. Человек говорит «мой сайт не виден», а на деле сайт прекрасно в индексе — просто не в топе. И поскольку дальше первой, ну максимум второй страницы выдачи почти никто не заглядывает, ощущение полное, будто сайта нет вовсе.
Причина тут уже не техническая. Обычно это слабая проработка: не собрана нормальная семантика, тонкий или неуникальный контент, нет внутренней перелинковки, маловато внешнего авторитета. С индексацией-то порядок, а вот с продвижением — нет. И чинится это не одной правкой, а системной работой над сайтом. Собственно, с этого этапа полноценное SEO и начинается.
8. Контент не отвечает на запрос пользователя
Поисковик всё лучше понимает, чего человек на самом деле хочет, и подбирает страницы под это намерение. Если по коммерческому запросу «купить X» у вас лежит расплывчатая статья обо всём и ни о чём, вы проиграете конкурентам, которые дали человеку ровно то, что он искал: карточку товара, цену, кнопку.
Как исправить: привести контент в соответствие интенту. Под коммерческие запросы — коммерческие страницы с конкретикой. Под информационные («как выбрать», «что такое») — развёрнутые полезные материалы. Одна и та же страница редко хорошо закрывает оба типа запросов сразу, поэтому их обычно разводят.
9. Дубли страниц
Когда один и тот же контент открывается по нескольким адресам — с www и без, со слэшем на конце и без него, с utm-метками, — поисковик встаёт перед выбором, какую версию показывать. И нередко решает не показывать никакую, чтобы не гадать. Плюс дубли размывают вес: вместо одной сильной страницы у вас несколько слабых, конкурирующих между собой.
Как проверить: инструменты вроде Siteliner находят внутренние дубли, а в вебмастерах видно, какие страницы поисковик считает неканоническими. Как исправить: выбрать одну версию каждого URL, настроить на неё 301-редиректы со всех остальных вариантов и проставить корректные canonical.
10. Мобильная версия работает плохо
Google уже давно оценивает сайты по мобильной версии, а не по десктопной. Отсюда неприятность: если на телефоне сайт разъезжается, грузится бесконечно или им просто неудобно пользоваться, позиции проседают сразу везде, включая компьютеры. А учитывая, что основная масса поискового трафика сегодня мобильная, цена вопроса высокая.
Проверяется это в лоб — прогоните ключевые страницы через Mobile-Friendly Test и просто откройте сайт на своём телефоне, честно попробовав им попользоваться. Дальше — приводить адаптив в порядок; про мобильную версию и её типовые болячки мы подробно писали в статье про технический аудит, там разложены конкретные критерии.
11. Сайт попал под фильтр или санкции
Если сайт нормально рос, а потом позиции резко обвалились, стоит проверить, не наложен ли фильтр. Поисковики наказывают за накрутку поведенческих, покупные ссылки низкого качества, переспам ключевыми словами, агрессивную рекламу и неуникальный контент. Под фильтром сайт может почти полностью пропасть из выдачи, хотя технически с ним всё в порядке.
Как проверить: заглянуть в уведомления Яндекс.Вебмастера и Google Search Console — за ручные санкции там обычно прилетает сообщение. И посмотреть на графики: резкий одномоментный провал трафика — характерный признак. Как исправить: найти нарушение, устранить причину (убрать плохие ссылки, почистить переспам) и отправить сайт на пересмотр. Это самый долгий из сценариев — восстановление занимает время.
12. Слишком высокая конкуренция в нише
Иногда с сайтом всё хорошо, а в топ всё равно не пробиться — потому что там сидят гиганты с большими бюджетами, старыми доменами и огромным ссылочным профилем. Обойти их по высокочастотным запросам за месяц физически невозможно, и это не поломка, а объективная реальность рынка.
Выход — не биться лбом в самые конкурентные запросы, а заходить сбоку. Через низкочастотные и узкие нишевые формулировки, где конкуренция слабее, а конверсия нередко даже выше. И параллельно потихоньку наращивать авторитет домена. Игра вдолгую, без системного продвижения тут не обойтись.
Что делать дальше
Если пробежались по списку и нашли свою причину среди первых шести — скорее всего, справитесь сами или силами разработчика, это чинится быстро. А если сайт в индексе, но не растёт, словил фильтр или ниша забита под завязку — это уже не разовая правка, а системная работа, где нужен опытный взгляд. Начать разумно с диагностики: она покажет, где именно из двенадцати точек у вас проблема и в каком порядке всё чинить.