Наверное, вы уже неоднократно сталкивались с рекомендациями о том, что нужно добавлять сайты в такие сервисы как Яндекс.Вебмастер и Google Search Console (ранее Google инструменты для веб-мастеров - прим. ред.), но зачем это надо делать?
Нужен ли мне поисковик?
Для того чтобы ответить на этот вопрос, для начала, давайте
разберёмся с тем, а зачем вы создали свой сайт, в том же формате блога.
- Вариант
1: просто чтобы был. В этом случае поисковики не нужны. Вы
можете дать ссылку на сайт друзьям, поделиться ею в соцсетях и т.д.
- Вариант
2: чтобы люди находили и читали, публикуемую на сайте, информацию.
В этом случае без поисковых систем не обойтись, т.к. именно они и
осуществляют поиск по сети Интернет.
Если вы выбрали первый вариант, то дальше можете не читать,
а если второй – продолжим.
Что такое поисковая система?
Чтобы понять важность таких сервисов, как Яндекс.Вебмастер
и Google Search Console,
необходимо разобраться с тем, что такое поисковая система и, как она
работает.
Очень доступно об этом рассказывает Константин Кирилюк
в своей статье «Что такое поисковая система и как она работает?» - читаем тут. Я же приведу лишь её фрагмент, немного сократив и упростив для
понимания новичка.
Поисковая система (англ. search engine)
– это набор программ, выполняющий сбор и обработку данных в Интернете, а также
поиск по имеющимся данным и вывод результатов поиска по запросу пользователя.
- индексация
- сбор и обработка данных;
- поиск
- поиск и вывод результатов.
Всё происходит именно в такой последовательности. Для того
чтобы поисковики могли что-то найти, им нужно это что-то добавить в свою базу
данных.
Проблема в том, что поисковые системы изначально не знают о
существовании вашего сайта. Вы должны им об этом сообщить. Сообщить URL-адрес главной страницы
сайта, с которой будет начат сбор и обработка данных.
Остальные страницы сайта будут проиндексированы по ссылкам,
которые найдёт поисковый робот на главной, а потом и остальные страницы.
Очевидно, что на это понадобится время.
И вот мы подходим к самому главному:
- Вариант 1: вам неинтересны подробности, пусть поисковик сам разбирается, как и что индексировать. В этом случае будет достаточно воспользоваться, так называемой, аддурилкой (от англ. add url) – формой добавления сайта в поисковую систему, например:
- Аддурилка
Google: google.ru/intl/ru/addurl.html.
- Аддурилка
Яндекс: webmaster.yandex.ua/addurl.xml.
- Аддурилка
Поиск@Mail.ru: http://webmaster.mail.ru
- Вариант 2: вам важно, чтобы всё было проиндексировано правильно. В этом случае вам не обойтись без таких сервисов, как Яндекс.Вебмастер и Google Search Console, т.к. именно они и сообщают вам о том, как идёт индексация сайта в поисковой системе.
Если вы выбрали первый вариант, то дальше можете не читать,
а если второй – продолжим.
Индексация сайта.
А теперь давайте разберёмся с тем, что нас может заинтересовать
в сервисах Яндекс.Вебмастер и Google Search Console. Я не буду
перебирать все их функции, но остановлюсь на том, что может быть важно для новичка.
Также я пропущу вопросы добавления сайта в Яндекс.Вебмастер
и Google Search Console,
т.к. они, в достаточно степени, раскрыты в статьях:
- Ваш
блог в инструментах вебмастера Гугл – автор Вика Барад
- Как подтвердить права на блог в Яндексе.Вебмастер – автор Ольга Протасова
Яндекс.Вебмастер
Отчёт: Настройка индексирования > Анализ robots.txt. Позволяет узнать,
какие секции файла robots.txt используются
поисковым роботом Яндекс, а также найти возможные ошибки.
Подробней о robots.txt читайте в Яндекс.Помощь, проследовав по этой ссылке. Если коротко, то файл robots.txt,
расположенный в корне сайта, позволяет вебмастеру указать поисковой системе
какие страницы можно индексировать, а какие нет.
Отчёт: Настройка индексирования > Файлы Sitemap. Позволяет
сообщить поисковому роботу Яндекс о существующих на сайте файлах sitemap.xml, а также узнать, как
идёт их обработка, и нет ли ошибок.
Примечание: убедиться, что в файле Sitemap нет
ошибок.
Подробней о Sitemap читайте в Яндекс. Помощь,
проследовав по этой ссылке. Если коротко, то файлы Sitemap, обычно в формате XML, позволяют вебмастеру сообщить поисковой системе, какие
страницы доступны для индексации.
Отчёт: Индексирование сайта > Страницы в поиске.
Здесь представлены те страницы сайта, которые уже проиндексированы поисковой
системой. Если какой-то страницы нет в этом списке, значит, нужно время или
есть проблема, которая не позволяет её проиндексировать.
Отчёт: Индексирование сайта > Исключенные страницы
(важно!). Самый важный и наглядный отчёт, который позволяет узнать о проблемах
индексации сайта (например, недоступных, с 404 ошибкой, страницах).
Всегда изучайте имеющиеся проблемы и, по возможности,
исправляйте ошибки.
Google Search Console.
Отчёт: Сканирование > Инструмент проверки файла robots.txt. Позволяет убедиться,
что файл robots.txt не
содержит каких-то ошибок и/или предупреждений.
Подробней о robots.txt читайте в справке Search Console. Если коротко, то файл robots.txt, расположенный в
корне сайта, позволяет вебмастеру указать поисковой системе какие страницы
можно индексировать, а какие нет.
Отчёт: Сканирование > Файлы Sitemap. Позволяет сообщить
поисковому роботу Google
о существующих на сайте файлах sitemap.xml,
а также узнать, как идёт их обработка, и нет ли ошибок.
Подробней о Sitemap читайте в справке Search Console. Если коротко, то файлы Sitemap,
обычно в формате XML,
позволяют вебмастеру сообщить поисковой системе, какие страницы доступны для
индексации.
Отчет: Индекс Google > Статус индексирования. Рекомендую сразу
переключаться на вкладку «Расширенные данные» и обновлять диаграмму, установив
галочку «Удалено». Здесь вы сможете получить статистику индексации вашего
сайта.
Такой отчёт полезен тем, что позволяет заметить
возникновение проблем с индексацией сайта. Уточнить имеющиеся проблемы можно
будет в других отчетах.
Отчёт: Сканирование > Ошибки сканирования
(важно!). Самый важный и наглядный отчёт, который позволяет узнать о проблемах
индексации сайта (например, недоступных, с 404 ошибкой, страницах).
В отличие от Яндекс.Вебмастер, в Google Search Console вы
сможете получить более подробную информацию об ошибке. Большая часть ошибок таковыми, грубо говоря, не являются, но вы хотя бы будете знать, на что стоит
обратить внимание.
Отчёт: Вид в поиске > Оптимизация HTML (новичкам). Очень
полезный отчёт для новичков, который отображает список проблем оптимизации HTML-кода под поисковые
системы.
Если коротко, то речь идёт о том, чтоб на каждой странице был уникальный TITLE и
description. Есть ещё
особенности индексации мультимедийных файлов, видеороликов или картинок, но это
тема для отдельной статьи.
Отчёт: Индекс Google > Заблокированные ресурсы (новичкам). Те самые
мультимедийные файлы, видеоролики или картинки, которые недоступны поисковому
роботу на страницах вашего сайта.
Как таковой это не является проблемой, но по возможности
стоит дать поисковику самому решать, что из такого контента индексировать, а
что нет.
*****
Спасибо Сергею за эту статью. Все возникшие вопросы, можно задать в комментариях блога.
здесь можно оформить подписку на новые шпаргалки
Вика, здравствуйте. Пока ещё не всё понимаю в этом деле. Вот, например, как управлять ТИЦ?
ОтветитьУдалитьСама, не всё сразу. В данной статье мы разбираемся с ценностью таких сервисов как Яндекс.Вебмастер и Google Search Console. У вас по этой теме есть вопросы?
УдалитьЭтот комментарий был удален автором.
УдалитьСама Доброта, Как правильно заметил Сергей, про ТИЦ-надо чуть позже. Сначала нужно эту тему понять.
УдалитьНу, а чтобы чтобы немного иметь представление, я бы предложила Вам посмотреть здесь https://help.yandex.ru/catalogue/citation-index/tic-about.xml
Сергей написано все верно, доступно и понятно. Только я бы добавила строчку, что корень сайта для вставки robots.txt, в блогах блогспот не доступен. У Вики информация по ведению и настройке блогов на блогспот, и посетители приходят за информацией именно по blogspot, во всяком случае большая часть.
ОтветитьУдалитьЧтобы не путались, уточните, что пользовательский файл robots.txt в блогах blogspot можно вставить в настройках-настройки поиска-пользовательский файл robots.txt.
В первые месяцы ведения блога, прочитав море инфы, я очень долго искала, как найти корневую папку блога.
Не хотелось сильно сужать тему до блогспота. Думаю, если возникнет такой вопрос, то лучше дать ссылку на пост по данному вопросу... думаю, у Вики или у вас Ольга такой найдётся ;-) Ну, а если нет, всегда готов опубликовать гостевой пост и у вас, задавайте тему и впере-е-е-ет! :))
УдалитьСергей, с этими проблемами более или менее понятно. А как устранять эти ошибки? Я обнаружила у себя заблокированные ресурсы и ошибки сканирования гугла. Я так понимаю, что гугл меня плохо видит. Может поэтому анализ сайта показал, что ТИЦ-10, а PR -0. Где найти инструкцию по применению Google Search Console?
УдалитьСама Доброта, где-то об этом в сообществах уже было. Спроси в я-блоггер.
УдалитьСергей, у меня уже давно написан пост на эту тему. Может у Вики тоже есть, пусть хозяйка даст ссылку своей статьи. Для новичков надо дать ссылку обязательно. У них и так в голове полная "каша", знаю по себе.
ОтветитьУдалитьОльга, я не сколько не обижусь, если ты в комментариях дашь ссылку на свою статью . У меня отдельного поста на эту темку нет. Только где-то вскользь поминала про это.
УдалитьДа, думаю, будет актуально добавить, в виде примечания, ссылку даже и в статью.
ОтветитьУдалитьВика и Сергей, если разрешение получила вот ссылка:
ОтветитьУдалитьhttp://goo.gl/rHBRLX
Нужно выделить и перейти по адресу.
В статье подробно написала о файле robots.txt, как и куда можно вставить.
Ольга, достаточно полная статья. Добавить нечего.
Удалитьподскажите изменил шаблон блога.а в search показывает старый шаблон и не обновляется как быть и по новому блог не добавить с новым шаблоном.
ОтветитьУдалитьОпа... картинки пропали. Изменю Я не совсем поняла вопрос, обратитесь в сообщество Я Блогер или Всё о SEO ребята хорошие- помогут. Или вот это
Удалитьhttp://www.blogopoisk.ru/2016/02/blogger-domain.html. Я правда не поняла. Домен Вы привязали или что.
а у меня на сайте почему то не все страницы проиндексированны, хотя я их поставил на индексацию дня 2 назад, но всё же с чем это может быть связанно? мой сайт www.денги24.рус
ОтветитьУдалитьДедушка АУ, 2 дня ещё мало. Яндекс вообще новые сайты очень поздно начинает индексировать. Молодые сайты пока некоторое время находятся в так называемой песочнице.
ОтветитьУдалитьЯ сменила домен,всё привязала,всё работает.Но не могу понять,вот эти Файлы Sitemap надо только один раз отправлять на главную страницу,к примеру вот так Sitemap: https://www.monetka.website/sitemap.xml
ОтветитьУдалитьили так надо сделать на каждую страничку?
На весь блог один такой.
ОтветитьУдалитьспасибо
ОтветитьУдалить