Почему сайта не видно в поиске

Знакомая ситуация: сделали качественный профессиональный веб-сайт, а его нельзя найти в поиске? Какой бы запрос не вводился, веб-ресурс в естественной выдаче(не связанной с ведением рекламных кампаний) не отображается. Первая мысль, которая может возникнуть в голове у человека с подобной проблемой, - сайт не работает, дальнейшее продвижение в поисковых системах возможно только с помощью рекламы.

Вне зависимости от того, сколько стоила вам разработка сайта, будь-то пятьсот рублей или два миллиона, стоит заранее ознакомиться с основными причинами возникновения подобных неприятных ситуаций и способах устранения возникающих проблем, негативно сказывающихся на индексации и последующем ранжировании веб-ресурса в поиске.

Основные причины того, что сайт не отображается в поисковой выдаче

Первое, на что хотелось бы обратить внимание, – это время запуска веб-сайта и открытие доступа на него. Устоявшийся среди огромного количества владельцев сайтов стереотип, что интернет-ресурс должен появиться в выдаче «Яндекса» и «Google» сразу же после его размещения на хостинге или выделенном сервере.  На самом деле, ситуация складывается другим образом, а именно:

• при создании нового веб-сайта и его размещении на новом домене потребуется в среднем от 1 до 3 недель для того, чтобы он был обнаружен поисковыми роботами «Yandex» и «Google» и начался процесс его индексации, позволяющей производить ранжирование в органической выдаче;

• при размещении нового сайта на старом домене может произойти замедление процесса индексации, связанное с присутствием негативного возможного «наследства» восприятия ресурса поисковыми системами.

Оба варианта характерны при запуске нового интернет-ресурса. В некоторых ситуациях возможно и увеличение временных затрат на индексацию из-за технических нюансов и/или особенностейпостроения данного сайта. К примеру, если ресурс имеет сложную иерархию и структуру, многоуровневую навигацию, динамический (генерируемый из базы данных) контент, может потребоваться и более месяца на то, чтобы он стал доступен в естественной выдаче.

Чтобы узнать о том, состоялась ли индексация интернет-ресурса, стоит воспользоваться специальными инструментами «Яндекс Вебмастер» и «Google Search Console». В ситуации, когда интернет-сайт не отображается в поиске дольше указанного срока, стоит рассмотреть вероятность возникновения различных проблем, которые могут быть следующими:

1. Невидимость для поисковых машин – довольно частое явление и характеризуется тем, что ресурс частично или полностью скрыт от поисковиков. Это может быть связано с отключением индексации в файле «robots.txt» или наличиямета-тега «NOINDEX» на какой-либо странице.

2. Блокировка интернет-ресурса в файле «.htaccess» может послужить ещё одной причиной, из-за которой поисковые роботы часто не замечают сайт.  В случае использования систем администрирования (CMS), в панели управления есть специальный пункт в настройках, скрывающий веб-ресурс от роботов поисковых систем. Даная опция позволяет исключить нежелательную индексацию источника ещё в процессе разработки ресурса. Многие разработчики в спешке после окончания работ забывают отключить атрибут, что и является причиной отсутствия сайта в естественной выдаче.

3. Технические неполадки, связанные с затруднением или полной невозможностью произведения процесс индексирования роботами поисковых систем. Как правило, возникают при использовании самодельных систем управления, которые любят навязывать некоторые разработчики с целью дальнейшей привязке к себе на постоянное обслуживание. Программисты не любят работать с незнакомым «чужим» кодом и потому, стоимость обслуживания веб-ресурса на самодельной CMS будет значительно дороже популярных и широко распространенных. Этим и пользуются любители «самопальных» систем, практически не оставляя альтернативного варианты.

4. Проблемы с навигацией на сайте. Ещё одна разновидность, оказывающая негативное влияние на индексацию и ранжирование веб-ресурсов в органической выдаче. В большинстве случаев, возникает из-за использования динамически создаваемого контента, сложной иерархии и вложенности страниц. Чтобы исключить влияние негативного фактора, рекомендуется создать карту сайта, регулярно её обновлять и пополнять, что позволит поисковым роботам «ближе» познакомиться со структурой и содержимым ресурса.

5. Попадание под фильтр поисковых систем. Если вы до сих пор используете закупку внешних ссылок в качестве способа продвижения веб-сайта или занимаетесь искусственной накруткой поведенческого фактора, высока вероятность попадания под действие фильтра со стороны поисковых роботов «Яндекса» и «Google», что грозит резкими изменениями в ранжировании, вплоть до полного исключения из выдачи и занесения в черный список.

6. Блокировка веб-ресурса государственными органами из-за наличия на нём какой-либо запрещенной информации, контрафакта, содержимого пиратского характера (например, распространение нелицензионного программного обеспечения с обходом лицензий и генераторами ключей – «Crack»). Сайт вправе заблокировать: «Роскомнадзор», «Прокуратура», «Министерство Внутренних Дел (МВД)», «Федеральная Налоговая Служба (ФНС)», «Генеральная Прокуратура», «Роспотребнадзор». Причиной для блокировки может служить, как осуществление противозаконной деятельности (азартные игры на деньги, продажа оружия, наркотических средств, контрафактного алкоголя, подделка официальных документов, проституция, распространение санкционных товаров и т.п.), так и размещение информации с сомнительным содержимым (призывы к суицидам и экстремизму, аборты, инструкции по изготовлению запрещенных препаратов, сведения об организации запрещенных митингов и т.д.). Блокировка ресурса осуществляется по IP адресу хостера. Узнать о наложении блокировки можно по специальной заглушке, которая появляется в данном случае при заходе на сайт.

7. Сайт виден и доступен, но находится слишком далеко в поисковой выдаче. Довольно распространенная ситуация, при которой веб-ресурс виден в поисковике, но его позиции выходят далеко заТОП-50, 100, 200, 300. Процесс происходит при влиянии следующих негативных факторов:

• низкая уникальность содержимого на сайте, наличие плагиата и «чужого» текста;

• дублирование информации, присутствие страниц-дубликатов;

• кто-то использует ваш контент, заявляя о его уникальности в панелях веб-мастеров;

• «переомтимизация» - высокаязаспамленность ключами веб-источника, неудобство тексто-графического содержимого для восприятияпосетителями (должно быть не более 4% ключевых запросов на 1000 знаков);

• ошибки разметки и оформления;

• шаблонность при оформлении заголовков и разделов;

• малый объем текста на ресурсе (менее 500 знаков без пробелов) и низкая посещаемость;

• навигация построена на flash и ajax;

• высокий уровень конкурентности (в поиске имеется более 30 «крутых» сайтов, которые плотно обосновались при ранжировании ресурсов в органической выдаче);

• наличие на вашем интернет-ресурсе «черных» ссылок, ведущих на веб-сайты, попавшие под санкции «Яндекса» и «Google»;

• размещение «битых» ссылок и пустых файлов;

• перенасыщенность внутренними и внешними ссылками (одна страница веб-ресурса должно содержать не более 100 веб-ссылок);

• переполнение рекламой;

• отсутствие мобильной версии (адаптивности), ведущее к «просадке» трафика, идущего со смартфонов и планшетов;

• долгая скорость загрузки страниц;

• несоответствие содержимого, интересам посетителем, «не раскрытие» темы до конца (в случае с информационными источниками);

• наличие вредоносного кода, вируса, скрытых ссылок, осуществляющих перенаправление;

• сервер (хостинг), на котором размещается интернет-ресурс, не справляется с нагрузкой.

Могут встречаться и другие причины низких поисковых позиций веб-сайта, выявить точную проблему лучше всего обратившись к специализированному профильному специалисту по поисковому продвижению.

Итак, разобравшись с основными причинами отсутствия сайта в естественной выдачи поисковых систем, рассмотрим способы диагностирования (выявления проблем), а также варианты исправления сложившейся ситуации.

Инструменты для выявления причин, из-за которых сайт не видно в поиске.

Двумя основными инструментами являются: «Яндекс Вебмастер» и «Google Search Console», позволяющие не только своевременно обнаружить возникающие с веб-ресурсом проблемы, но и ознакомиться с прохождением самого процесса индексации более наглядно.

Чтобы использовать представленные сервисы, достаточно иметь аккаунты в «Yandex» и «Google» и пройти процесс подтверждения прав на веб-ресурс. Практически сразу же после этого, отобразятся возможные проблемы с сайтом.

Здесь же можно произвести и дополнительное диагностирование интернет-сайта.  Доступны инструменты проверки прохождения процесса индексирования, файлов robots.txt и sitemap.xml, а также удобство просмотров на мобильных устройствах.

Практически обо всех проблемах, связанных с индексацией информации на сайте и его видимости для поисковых машин, можно узнать, используя всего лишь данные инструменты.

Дополнительно следует упомянуть о таком сервисе, как «Page Speed Insights», который позволяет измерить скорость загрузки страниц веб-ресурса при заходе с ПК или мобильного телефона.

Практически сразу же после окончания анализа, отобразятся рекомендации, следуя которым можно улучшить быстродействие интернет-ресурса для различных типов устройств. Данный инструмент может помочь улучшить позиции в органике.

Если вы хотите произвести быструю оценку индексирования сайта в поисковиках без использования панелей веб-мастера,можно использовать специальный онлайн-сервис, доступный по ссылке: http://www.raskruty.ru/tools/index/

Инструмент бесплатный, для использования достаточно всего лишь ввести url интересующей страницы.

После нажатия кнопки «Проверить индексирование», отобразится таблица с информацией о том, сколько страниц проиндексировано в поисковых системах «Яндекс» и «Google».

Следующим шагом после обнаружения причин, из-за которых сайт не отображается в результатах поисковой выдачи, будет их непосредственное устранение.

Как исправить возможные причины отсутствия сайта в поиске

Для удобства восприятия информации, систематизируем данные в виде таблицы.