Как закрыть сайт от поисковых систем: все известные способы

Этим занимаются чаще всего для скрывания реферальных ссылок, так как по ним «наш брат» не охотно кликает. Так же можно скрывать внешние ссылки на сайте, чтобы не разбазаривать вес страницы, особенно это касается не нужных сквозняков на RSS, Twitter блога и.т.п. На этом блоге я ещё не спрятал внешние ссылки, но в скором времени надо заменить.

Существуют несколько способов скрыть ссылки.

Алгоритмы поисковых систем постоянно совершенствуются, поэтому необходимо проводить тщательную работу с ресурсом, чтобы он оказался в поисковой выдаче:

  • Проверьте файлы , htaccess, на наличие блокировки, а также проверьте код страниц на наличие мета-тега NOINDEX и атрибут сокрытия ресурса в CMS;
  • Для решения технических неполадок обратитесь к специалистам, которые смогут грамотно оптимизировать сайт;
  • Если сайт попал под фильтр, выясните под какой именно и устраните причину. Например, откажитесь от изобилия рекламы или снизьте количество ключей на странице:
  • Если сайт находится в поисковой выдаче слишком глубоко, начните комплексную работу по продвижению ресурса;
  • Постоянно анализируйте и оценивайте состояние сайта с помощью , Google Search Console, а также и Google Analytics.

Общая оценка / 5. Всего проголосовало

Отправить ответ Эта форма защищена от спама Эта форма защищена от спама

Как найти обратные ссылки

Проще всего следить за ними через бесплатные сервисы поисковых систем:

  • Google Search Console («Ссылки» → «Внешние ссылки» → «Страницы, на которые чаще всего ссылаются»). Отслеживает ссылки на ваш сайт, которые учитывает Google. Позволяет сразу увидеть страницы, на которые больше всего упоминаний и сайты, которые ссылаются чаще всего.

  • («Ссылки» → «Внешние ссылки»). Сразу указывает ИКС сайта и распределение по странам (удобно, если нужно отфильтровать домены из других стран или регионов, которые не могли появиться органически, а значит, могут быть вредоносными).

Можно использовать внешние сервисы. Бесплатны, например, MegaIndex, Xtool, Linkpad. С их помощью можно посмотреть адрес ссылающегося сайта и текстовое окружение ссылки.

Возможности платных сервисов еще шире. Наиболее известные из них — Ahrefs, Semrush, MajesticSEO, Serpstat. В этой статье разбираем их функционал на примере Ahrefs, в интерфейсе остальных примерно то же самое.

Читайте также:  Большой обзор SUSE Linux

Платные сервисы быстрее собирают ссылки, определяют, закрыты ли они от индексации (follow/nofollow), анализируют авторитетность донора и его историю, местонахождение, и другие параметры. Они анализирут весь ссылочный профиль сайта (бесплатные сервисы могут ставить ограничение в 1000 ссылающихся доменов) и проверяют и ссылочный профиль конкурентов.

Прячем ссылки при помощи PHP

Смысл этого способа очень простой, мы отправляем пользователя на определённую страницу, на которой работает скрипт по перенаправлению и он отправляет его, по нужному для нас адресу.

Пошаговая настройка:

  • Создаём страницу
  • Записываем в этот файл, вот такой код: header («location: «); ?>

    В location, как вы уже догадались — указываем адрес перенаправления.

  • Заливаем файл в корень сайта или в какую-нибудь папку (тогда к ссылке придется ещё указывать адрес папки).
  • На сайте, вместе саповской ссылки вставляем путь к файлу , для моего сайта это будет выглядеть вот так – Sape

Минус этого способа в том, что для каждого вида реферальных ссылок, надо создавать новые файлы и их может быть очень много. Следующий способ упростит эту задачу.

Как узнать, есть ли на сайте внешние ссылки

Установить наличие внешних ссылок можно как вручную, найдя в коде загруженной в браузере веб-страницы теги с HTTP, так и с помощью специальных приложений и скриптов — онлайновых и десктопных. Одним из них является — сервис для анализа и оптимизации сайтов.

Как узнать, есть ли на сайте внешние ссылки

Вбив на странице _extractor URL проверяемой страницы, можно вывести все внутренние и внешние ссылки, в том числе неиндексируемые.

Для анализа всего сайта лучше использовать программу Xenu Link Sleuth, предназначенную для аудита внутренних и внешних ссылок веб-ресурсов.

Как узнать, есть ли на сайте внешние ссылки

Запустив приложение, выберите в меню «File» опцию «Check URL», введите в поле адрес вашего сайта, отметьте, если не отмечен, чекбокс «Check external links» и нажмите «OK».

Готово, останется только внимательно изучить список найденных ссылок, отсортировав их по доступным параметрам.

Как узнать, есть ли на сайте внешние ссылки

Другой способ проверить сайт на предмет «левых» ссылок — воспользоваться скриптом Find-Link, ссылку на который вы найдете в конце статьи.

Положите скрипт в корень вашего сайта и обратитесь к нему напрямую, вот так: . Скрипт выведет все внешние ссылки, включая те, которые доступны из панели управления CMS. Также будут выведены пути и имена файлов, в которых прописана ссылка, благодаря чему вы тут же можете их открыть и отредактировать.

Как узнать, есть ли на сайте внешние ссылки

Скрипт Find-Link не работает на локальном сервере, использовать его есть смысл после того как сайт будет залит на сервер.

Как обезопаситься, если злоумышленники уже получили доступ к сайту?

  1. Всегда иметь установленными на сайт и Google Webmaster. Старайтесь обращать внимание на предупреждения, которые там появляются. Если ваши страницы по каким-то причинам ограничены к индексации – эти системы уведомят вас и вы сможете начать поиск причины. Для самых искушенных – можно также поставить Кабинет Вебмастер Mail, Средства веб-мастера – Bing;
  2. Иметь современную CMS, которая обновлена, защищена и имеет журнал событий. Журнал событий вообще очень спасает от проверки тысячи файлов;
  3. Изменить все доступы, постараться на время отсечь второстепенные доступы у сотрудников и проверить сайт на наличие бэкдора. Как вариант – антивирусом для сайтов от «Яндекса»;
  4. В Google Webmaster при обнаружении подозрительных страниц с параметрами использовать инструмент «Удалить URL-адреса»;
  5. Иметь грамотную службу технической поддержки, хороший хостинг с быстрой и круглосуточной поддержкой и, по возможности, подрядчика или штатного специалиста по поисковым системам;
  6. Естественно, не переходить по подозрительным ссылкам, использовать антивирус, сложные и разные пароли, двухфакторную авторизацию (подтверждение по паролю и SMS) и другие очевидные вещи информационной гигиены, о которых мы знаем, но не всегда стабильно выполняем.

Будьте осведомлены и готовы ко всему. Тихий взлом с целью убрать ваш сайт из поиска – это коварный и трудно заметный прием. Если не среагировать вовремя, то хватит и недели, чтобы злоумышленники повлияли на позиции вашего сайта и скинули вас со счетов перед сезоном продаж. 

По теме: SEO для стартапа: дешевый трафик не мешал еще ни одной компании

Скрытая ссылка под картинкой на собственном сайте

Владельцы блогов, сайтов хотят сделать свои картинки кликабельными, чтобы посетитель, нажимая на них, попадал в нужное место (например, на регистрационную страницу). Ни для кого не секрет, что современные пользователи устройств, предпочитают открывать картинки, рассматривать их.

В связи с этим, опытные мастера разработали способ маскировки, названный под картинку, который позволяет не только привлекать внимание человека, но и экономить его время.

Чтобы использовать такой метод сокрытия информации, нужно:

1. Взять источник.

2. Кликнуть на картинку, которую хотите разместить на своем ресурсе.

3. Найти на панели инструментов значок «Вставить и изменить ссылку» (напоминает цепочку) и кликнуть по нему.

Скрытая ссылка под картинкой на собственном сайте

4. В открывшемся окне в строку URL вставить ссылку.

5. Согласиться с открытием в новом окне.

6. Теперь ваша картинка кликабельна.

Точно также можно шифровать под слово. Только для этого стоит выбрать не картинку, а нужную фразу. Остальные шаги остаются неизменными.

Вы знаете основной секрет тизерной рекламы? Это когда некая недосказанность картинки вызывает у человека желание скорее раскрыть тайну увиденного. Запомните, что научившись делать картинку кликабельной, вы с легкостью сможете разрабатывать свои необыкновенные, манящие рассылки, привлекать внимание посетителя и т.д.

Способы отключить ненужные ссылки

  1. Самый простой способ удалить низкокачественные входящие ссылки – напрямую обратиться с соответствующим запросом к владельцам сайтов-доноров. Правда, не всегда есть возможность получить их контактные данные. Кроме того, некоторые могут просто игнорировать подобные просьбы или требовать оплату за их исполнение.  
  2. В случае наращивания ссылочной массы с помощью специализированных бирж, отключить ненужные ссылки можно через них же. На некоторых из них подобный функционал внедрен в систему, у других же нужно обращаться к администрации биржи с просьбой удалить внешние ссылки низкого качества.  
  3. Если убрать плохие ссылки с доноров не получается, можно призвать на помощью гугловский инструмент отклонения обратных ссылок – Disavow Links Tool (подробнее о нем – в отдельной статье). Правда в этом случае ссылки не ликвидируются, а лишь перестают учитываться поисковиком при ранжировании.

А вот у Яндекса подобного функционала к сожалению нет. Поэтому для восстановления репутации сайта в глазах этого поисковика удалить внешние ссылки можно только двумя первыми способами.

Средства для владельцев сайтов на WordPress

Если вам посчастливилось быть обладателем ресурса на WordPress, то вы можете закрыть свой сайт от индексации с помощью самой админки, совершив лишь несколько кликов мышью:

  • в меню админки перейдите во вкладку Параметры;
  • выберите пункт Чтение;
  • установите галочку на пункте «Попросить поисковые системы не индексировать сайт»;
  • сохраните изменения.

Также существует ряд SEO-плагинов, например, «All in One SEO Pack», с помощью которых можно контролировать индексацию отдельных документов сайта.

Средства для владельцев сайтов на WordPress

Другие CMS также могут включать в себя подобные функции и плагины.

Какой бы вы ни выбрали способ закрытия от индексации, помните: самое надежное средство от попадания в индекс – хранить сайт на сервере, отключенном от всемирной сети.

Подпишись на рассылку дайджеста новостей от Webline Promotion

Email*Подписаться на рассылку Предоставлено SendPulse