Нас в первую очередь интересует продвижение сайта - а не сам сайт. Другими словами - мы будет уделять больше внимания тем поисковым машинам, которые являются лидерами в поиске на рынке России. И в первую очередь сайт будет "причесываться" именно для этих поисковых роботов.

По статистике на 2015г:

1. Яндекс - 49%
2. Гугль - 40%
3. Mail.ru - 5%
4. Рамблер - 3%
5. Bing - 2%
6. Прочие - 1%



Конечно, никто не обязывает регистрировать свои сайты в поисковых системах через вебмастер. Робот и так доберется до Вашего сайта и его проиндексирует. Но:
- это будет значительно медленнее
- в индекс могут попасть не все страницы сайта или не те страницы, которые необходимы

Сервис Webmaster Yandex
Находится здесь https://webmaster.yandex.ru

Яндекс учитывает (частично) указания в robots.txt

1. Файл sitemap (его местонахождение) берется из robots.txt, раз в две недели робот его проверяет. Если его явно не добавлять - он все равно появится в webmaster

2. Задать основной домен (с www / без www) можно из из панели управления, но он должен совпадать с указанием основного хоста в robots.txt

Сервис Webmaster Google
Находится здесь https://www.google.ru/webmasters/

Р
егистрируем аккаунт (если еще нет), заходим в сервис и регистрируем свои сайты (через разные варианты подтверждения прав). Ничего сложного.

Важные нюансы, которые совсем не очевидны.

1. Гугль достаточно условно реагирует на инструкции в файле robots.txt 

1.а Запрет индексирования отдельных частей/страниц сайта. Гугль все равно проиндексирует все, до чего дотянется, просто страницы, запрещенные к индексированию, не будет показываться в выдаче. Если Вы хотите полностью что-то закрыть от Гугля - надо ставить пароль на папку на сервере.
1.б Основное зеркало сайта - на инструкцию в robots.txt Гугль не обращает внимания, робот выбирает вариант автоматически. Можно вручную дать указание в вебмастере: завести два варианта сайта (с www и без www), указать нужный вариант (например, без www), второй вариант сайта из вебмастера удалить.
1.в Файл sitemap. Робот сам обходит сайт, не обращая внимания на sitemap, нужно указать вручную в настройках вебмастера (где этот файл находится и загрузить его в сервис).

2. Удаление отсутствующих страниц (код ошибки 404) сайта из индекса Гугль. Само не удаляется.
Надо:
2.а Внести запрет на страницы/папки в robot.txt
2.б Указать вручную роботу, что их надо удалить из индекса

3. Гугль хочет "видеть" сайт как человек, т.е. просто текста ему недостаточно. Нужны картинки и таблицы стилей. Если на них стоит запрет в robots.txt - надо разрешить, иначе сайт будет понижаться в выдаче.

Сервис Webmaster Mail
Находится здесь http://webmaster.mail.ru/
Для входа достаточно регистрации и  наличии почты mail.ru 

Сервиса Webmaster Rambler не существует, т.к. используется поиск Яндекса

С
ервис Webmaster Bing
Находится здесь http://www.bing.com/toolbox/webmaster/
Н
еобходима регистрация аккаунта Microsoft
  • Файл Sitemap (1196)

    Файл sitemap нужен для роботов поисковых систем, что бы они "понимали", какие страницы нужно индексировать. В противном случае очень долго будет проиндексирована только одна главная страница. По ссылкам с нее роботы пойдут намного позже (страниц и сайтов стало много и робота на всех не хватает). Файл sitemap влияет только на индексацию сайта и...

  • Файл robots.txt (962)

    Основная задача этого файла - сообщать роботам поисковых систем, что можно и что нельзя индексировать на сайте. Точнее - это рекомендация роботам.По факту поисковые машины все равно индексируют запрещенные страницы, но не показывают их в выдаче. Иногда происходит сбой и запрещенные страницы...

  • Вебмастер (891)

    Нас в первую очередь интересует продвижение сайта - а не сам сайт. Другими словами - мы будет уделять больше внимания тем поисковым машинам, которые являются лидерами в поиске на рынке России. И в первую очередь сайт будет "причесываться" именно для этих поисковых роботов.По статистике на 2015г:1. Яндекс -...

  • Индексация и коды сервера (852)

    Индексация всех страниц сайта выполняется автоматически. Но если Вы хотите использовать сайт активно - то это Ваша головная боль, необходимо подправлять робота, что бы он все делал правильно (именно с Вашей точки зрения). 1. Все страницы для индексации должны быть указаны в файле Sitemap 2. Все...

  • Индексирование сайта (848)

    Несмотря на все громкие заявления ПС = на первом месте для хорошей индексации идут ссылки, все остальное (юзабилити, глубина просмотра, объем сайта слабо влияет на индексацию). Т.е. если у Вас есть супер новый хороший сайт - без наличия ссылок на его страницы со стороны других сайтов нормальной...

  • Поисковая машина Google (734)

    Поисковая машина Гугль для российского сегмента находится здесь www.google.ruДля международного сегмента находится здесь www.google.comЕсть проблема - гугль все равно Вас переадресует на российский вариант, определив Ваше расположение. Если Вы хотите искать без привязки к территории, то нужно использовать вариант...

  • Поисковая машина Яндекс (722)

    Поисковая машина Яндекс https://www.yandex.ru/ - для поискаВебмастер Яндекс https://webmaster.yandex.ru/ - для владельцев сайтовМетрика Яндекс https://metrika.yandex.ru/ - статистика посещений сайтаПоисковые алгоритмыФильтрыТиЦ - тематический индекс цитирования

  • Update (308)

    Многие слышали про какие-то загадочные апдейты у Яндекса и у Гугль. Так сказать - иконы сеошников. Так что это?Ответ простой. Все изменения по нашему сайту (число проиндексированных страниц, число ссылок и прочая) - мы видим пока только в Вебмастере :) Это никак не отражается на поисковой выдаче....