Пошаговая регистрация сайта в поисковых системах Google, Яндекс, Bing, Mail и Рамблер

Все описанные ниже способы добавления веб-сайта в поисковики являются абсолютно бесплатными и помогают быстро, автоматически (без вашего участия – например, если кто-то разместил внешнюю ссылку на посадочную страницу вашего проекта), просканировать и проиндексировать страницы вашего сайта.

Cодержание

1.      Есть ли мой сайт в поиске?

2.      Почему его нет в индексе?

3.      Как зарегистрировать сайт в Google?

3.1.      Гугл Вебмастер

3.2.      Посмотреть как Googlebot

3.3.      Addurl Google

4.      Сообщить о новом сайте в Яндекс!

4.1.      Яндекс Вебмастер

4.2.      Переобход страниц

4.3.      Addurl Yandex

5.      Важное отличие в Гугл и Яндекс

6.      Добавить сайт в Bing

6.1.      Бинг Вебмастер

6.2.      Отправить URL-адреса

6.3.      Addurl Bing

7.      Регистрация сайта в Майл.ру через Кабинет Вебмастера Mail.ru.

8.      Как добавить сайт в Рамблер через Rambler Webmaster.

9.      Sitemap или Карта сайта

10.  Каталоги поисковых систем

11.  Внешние ссылки

12.  Сервис для ускорения индексации страниц

 

Мой сайт есть в поиске или нет?

Чтобы быстро проверить наличие веб-сайта в поисковой системе, выполните поиск по его URL.

Например, если нужно посмотреть, имеется ли сайт Википедия в поисковом индексе, то нужно ввести следующую команду в поисковую строку

site:wikipedia.org

ВАЖНО: поисковый оператор site пишется с маленькой буквы. Перед и после двоеточия тире не ставится.

Таким образом можно увидеть примерное кол-во страниц вашего сайта в индексе поисковой системы.

ВАЖНО: Точное кол-во страниц нужно смотреть через панели вебмастеров

Как посмотреть количество проиндексированных страниц:

· Google Search Console – Индекс Google – Статус Индексирования. Подробнее читайте тут.

·  Яндекс.Вебмастер – Индексирование – Страницы в поиске – История. Читаем здесь подробно.

 

Мой сайт не в поисковом индексе. Почему?

Некоторые страницы вашего сайта могут не быть в поисковой базе. Чаще всего причины следующие:

1. Другие сайты редко ссылаются на ваши страницы.

Вывод: проставьте несколько ссылок с тематических, трастовых и незаспамленных ресурсов. Бот перейдет по внешней ссылке, просканирует и добавит страницу на индексацию.

1. Если сайт новый, то поисковик может не успеть отсканировать его.

Вывод: нужно подождать. Сделайте действия, указанные ниже – добавьте сайт в панели веб-мастеров, сошлитесь на главную страницу вашего сайта несколькими ссылками из справочников поисковых систем, например, Google Мой Бизнес, Яндекс.Справочник.

1. Структура сайта затрудняет сканирование.

Вывод: Читайте в этой статье.

1. При попытке сканирования произошла ошибка.

Например, сервер слишком долго не отвечает. Краулер может подождать ответа в течении определенного промежутка времени, после чего он прекращает свои попытки просканить данный урл.

Также, советую мониторить коды ответов URL в панелях вебмастеров.

Эти статьи хорошо дополняют данный пункт

1. Как устранить ошибки сканирования в Google Search Console. Автор раскрыл категоризацию ошибок, как часто следует мониторить их наличие, какие виды ошибок есть, что они значат и как их устранить.
2. Google рассказал, что делать, если временно нужно закрыть сайт. Описаны 3 варианта действий: 1) Заблокировать функционал покупок. 2) Показывать всплывающее сообщение. 3) Полностью отключить сайт.
3. Советую ознакомиться с разделом «Сканирование и индексирование» в справке Google, в котором даны ответы на часто задаваемые вопросы.
4. Справочник по кодам статуса HTTP от Яндекса. Приведен перечень кодов, что они означают и что нужно делать с ними.
5. Справочник по ошибкам индексирования. Описаны ошибки загрузки и обработки документов роботами Яндекса.

Как добавить сайт в Google

Google Webmaster Tool

Делаем следующее:

1.  Добавляем ресурс в панели вебмастера Гугл на этой странице https://www.google.com/webmasters/tools/home

2.  Указываем тип ресурса – веб-сайт или мобильное приложение. В нашем случае, это сайт. Указываем ссылку на главную страницу сайта, с протоколом https (если вы перешли на него) или без него, а также – с www и без. Т.е, добавляем 4 версии сайта, если имеется https (https://www, https://, http://www, http//), если нет защищенного протокола, тогда добавляем две версии.

 

Этот пункт хорошо дополняет эта статья

Проверенный чек-лист в 27 шагов по быстрому переходу на https

3.      Подтвердить право собственности на ресурс. Существует 5 способов подтвердить право собственности на:

a.      сайт;

b.     субдомен;

c.      подкаталог.

Но не все из них могут вам подойти.

ВАЖНО: Все эти способы, а также, какие могут быть ошибки при подтверждении, описаны в справке Гугл.

ИМХО: Я подтверждаю права на сайт через 1 способ – размещение HTML файла на сервере, т.к. он для меня наиболее быстро реализуемый.

Посмотреть как Googlebot

Добавив ваш сайт в панель Гугл Вебмастер, я рекомендую сразу и добавить домашнюю страницу сайта на сканирование и индексирование через этот инструмент, чтобы поисковый бот, перейдя на главную страницу, переходим по ссылкам на ней для поиска и сканирования других страниц.

Этот инструмент вам следует применять также, когда вы изменили содержание нескольких страниц, например, удалили или добавили текст, картинки, видео, для запроса повторного сканирования этой страницы. Если же измененных страниц много, то лучше использовать для отправки на сканирование файл Sitemap (разберем ниже). 

ВАЖНО

Как использовать Сканер Гугл для сайтов, смотрите в справке Гугл.

Какие требования выдвигает Гугл к запросу на индексирование и какие особенности имеет этот инструмент, также смотрите в справке Гугл.

На заметку: Google выполняет сканирование и индексирование, когда робот Googlebot принимает запрос, а не в момент получения результатов Сканером Google для сайтов.

Addurl Google

Если вы не хотите добавлять сайт в Гугл Сеч Консоль, то можете воспользоваться «аддурилкой Google». Вы просто добавляете урл-адрес страницы вашего сайта, которую вы хотите отправить на сканирование и индексирование.

По мере обхода Гуглботом Интернета эта страница будет добавлена в поисковый индекс, если на сайте есть некачественное содержание. Т.е, нет неуникального, скопированного контента, не нарушены рекомендации по обеспечению качества.

ВАЖНО

Ключевые принципы, какие методы не стоит использовать и что нужно предпринимать, ознакомтесь в Google-справке.

Как добавить сайт в Яндекс

Яндекс Вебмастер

1.      Добавляем ресурс в панель вебмастера Yandex на этой странице

2.      Указываем адрес сайта.

При добавлении сайта укажите адрес, по которому он доступен: с префиксом www или без него, по протоколу HTTP или HTTPS. Вы можете скопировать адрес из строки браузера.

При внесении в Яндекс.Вебмастер сайт должен отвечать HTTP-кодом 200 ОК.

После нажатия на кнопку «Добавить», вам предлагается 4 варианта, как подтвердить права на сайт.

Если у сайта есть субдомен, необходимо добавить в сервис основной домен и поддомен отдельно. При этом подтвердить права можно одним кодом.

Все варианты подтверждения прав на управление ресурсом описаны тут.

ИМХО: Я подтверждаю права через размещение мета-тега на главной странице сайта или через HTML-файл в корневом каталоге.

Переобход страниц. Он же Addurl Yandex

Этот раздел помогает сообщить Яндексу о новых и обновленных страницах. Когда вы отправите адреса страниц, они примут один из статусов:

1. «В очереди» — страница передана роботу для обхода. В течение 3 суток заявка будет обработана.
2. «Робот обошёл» — страница посещена роботом. Данные о странице обновятся в поиске в течение 2 недель.
3. «Ошибка» — робот не смог посетить страницу.

Недавно Яндекс увеличил квоту на отправку страниц на сканирование - до 150 в месяц.

SEO-лайфхак

Если вам нужно отправить на повторное сканирование больше 150 урлов, например, в случае наложения фильтра «Баден-Баден» за переоптимизированные тексты, после редактирования/удаления текстов на страницах, если сайта состоит больше, чем из 150 страниц, вы можете отправлять измененные страницы на переобход через неглавные зеркала вашего сайта, которые вы добавили в панель ЯВ. Таким образом вы сможете помочь поисковому роботу быстрее просканить измененные вами документы.

Важное отличие в Гугл и Яндекс

Если вы добавляете новый сайт в Яндекс и для вас Яндекс является приоритетной поисковой системой для продвижения - с нее идет больше органического трафика на сайт, то делать 301-редирект до проведения склейки зеркал не стоит, т.к. если вы его сделаете, что робот-зеркальщик не сможет определить идентичность контента на всех версиях сайта и его будет редиректить на основную версию сайта.

И еще делаем для корректной склейки в Яндексе следующее:

1. Указывам в файле robots.txt директивы Host: главное зеркало. Если сайт переведен на https, то указываем и протокол с доменом. Если нет, то вставляем просто название домена, без протокола.
2. В Яндекс.Вебмастер, в разделе «Переезд сайта», на всех версиях сайта (с https, без https, с www и без) выбираем основное зеркало, которое и будет представлено в результатах поиска.

Ждем склейки зеркал в Яндексе. Когда закончится переклейка, вы сможете узнать через панель ЯВ, на главной странице, когда основная версия будет выше других версий сайта.

Вот так это выглядит.

После этого, можно устанавливать 301-редирект для проведения корректной склейки в Гугл.

Этот пункт хорошо дополняют эти статьи

Как правильно склеить/переклеить зеркала. Описаны простые способы склейки/переклейки разноименных доменов, домены с www и без, про выпадение из поиска и типичные ошибки, из-за которых происходит неправильная переклейка.

Порядок переезда сайта на новый домен. Что нужно сделать прежде, чем начать переезд , какими способами можно указать адрес главного зеркалы. И важная мысль: Чтобы склеить зеркала, роботу Яндекса достаточно директивы Host в файлах robots.txt для всех зеркал. Редирект настраивать необязательно.

Как добавить сайт в Bing

Бинг Вебмастер

Делаем следующее:

1. Регистрируем учетную запись. Можете использовать почту Gmail для этого. Переходим по этой ссылке и регимся.
2. Идем по этому УРЛ https://www.bing.com/webmaster/home/addsite и добавляем ваш сайт (с https или без), ссылку на карту сайта Sitemap и можете выбрать, в какое время на ваш сайт поступает больше всего трафика, чтобы робот Бинга в это время старался меньше выполнять обход страниц, чтобы не перегружать сервер. Я оставляю по умолчанию данный пункт «Весь день» и нажимаю «Добавить».

3.      Подтверждаем владение сайтом одним из 3 способов:

Вариант 1. Размещение XML-файла на сервере.

ИМХО: Мы с командой используем первый вариант, т.к. он наиболее быстро реализуемый.

Вариант 2. Через вставку meta-тега на главную страницу.

Вариант 3. Добавление записи CHNAME в DNS.

Отправить URL-адреса

После подтверждения прав пользования сайтом, вы можете добавлять посадочные страницы на на сканирование, как это реализовано в панелях веб-мастеров Гугл и Яндекс, через вкладку «Настройка сайта» - «Отправить URL-адреса»

ВАЖНО: В месяц можно отправить до 50 УРЛ. В день – не более 10. Эти ограничения действуют на уровне добавленного вами домена.

 

 

Addurl Bing

Альтернативный вариант для добавления URL документа – использование т.н. «аддурилки Бинг». По сути, это пример addurl Google.

Порядок такой:

1. Переходим по этой ссылке.
2. Вводим УРЛ-страницы, которую нужно отправить на сканирование или перескан.
3. Вводим капчу и отправляем.

 

Как добавить сайт в Майл.ру

Кабинет Вебмастера Mail.ru

Делаем следующие действия:

1. Регистрируем почтовый аккаунт в Mail.ru тут.
2. Переходим по этому бэклинку.
3. Вводим в поле ввода УРЛ-адрес главной страницы.

4. 

   
   

5. Выбираем один из способов верификации ресурса. Снова таки, я рекомендую выбрать либо размещение файла на сервере, либо мета-тега на домашней страницы, т.к. их быстрее всего реализовать.
6. Подтверждаем права.

 

Как добавить сайт в Рамблер

Rambler Webmaster

А никак. Т.к. с 23 июня 2011 года Рамблер/поиск использует поисковые технологии компании «Яндекс», дополняемые собственными сервисами, поэтому можно просто добавить сайт в Яндекс.Вебмастер.

Как это сделать, описано выше в части этой статьи «Сообщить о новом сайте в Яндекс».

Как вариант, можете добавить ваш сайт в тематический каталог популярных ресуров Рамблер ТОП 100 через эту форму. Вам будет профит, т.к. получите ссылку с трастового ресурса, и для сайта – поисковый бот, перейдя по ссылке в каталоге, просканирует главную страницу вашего сайта и все последующие, по имеющимся ссылкам на посадочных, в соответствии с выделенным краулинговым бюджетом (временем для краулинга и кол-во страниц, которые можно скраулить за один обход) для вашего ресурса.

Sitemap или Карта сайта

После добавления сайта в панели веб-мастеров, вы можете добавить ссылку на карту сайта с указанием урл страниц и других параметров для того, чтобы облегчить нахождение страницы краулеру, их последующему сканированию и внесению в индекс поисковой системы.

Как создавать и отправлять файлы Sitemap смотрите:

· в Google справке

· в Яндекс.Помощи

На заметку: Более подробно и файлах Sitemap я распишу в следующих обучающих статьях.

Каталоги поисковых систем

Т.к. принцип работы поискового бота основано на переходе по ссылкам в сети Интернет для нахождения новых страниц, то вы можете добавить свой ресурс в трастовые и незаспамленные каталоги ПС. Таким образом, вы полите и бэклинк с авторитетного сайта.

· Для Google – ранее был DMOZ. Сейчас уже не работает

· Для Яндекс – это Яндекс.Каталог. О том, как добавить сайт в ЯК – читаем в Яндекс.Помощи.

· Для Mail.ru – это Каталог Мейл.ру. Ознакамливаемся с правилами каталога тут.

· Для Рамблер – это Рамблер ТОП-100. Писал выше по нему.

Внешние ссылки

Просто запомните. Если где-то в интернете появилась внешняя ссылка на страницу вашего ресурса, то робот, со временем, перейдет по ней и просканит страницу, на которую она направляет.

Для ускорения сканирования можете добавлять анонсы своих статей/другой информации на созданные вами страницы в соцсетях Фейсбук, ВКонтакте, Одноклассники, Google Plus, Яндек.Дзен.

Сервис для ускорения индексации страниц

Я иногда пользуюсь сервисом IndexGator для того, чтобы быстро загнать страницу в индекс. Ознакомиться с принципами работы этого сервиса, его преимуществами , возможностями и тарифными планами можете на официальном сайте.

Коротко о работе в данном сервисе:

1. Регистрируемся
2. Пополняем счет
3. Создаем проект
4. Добавляем ссылки
5. Выбираем тариф

6.      Сохраняем и мониторим состояние на странице «Проекты».