Индексирование сайта является базовым вопросом для SEO-специалистов и владельцев web-ресурсов. К тому же нужно не просто загнать все страницы в индекс, а сделать это правильно, чтобы иметь возможность дальнейшей оптимизации. Многие опускают этот вопрос.
Со временем сайт индексируется самостоятельно, но доверия у поисковой системы Google к «заброшенным» страницам нет. Именно так воспринимает поисковая машина такие сайты. Рассмотрим варианты, как добавить сайт в гугл (google).
AddURL от Google
В Google создали специальный сервис, чтобы Вы могли указывать вручную поисковым роботам на новые сайты и их внутренние страницы.
добавить ресурс в индекс Google
При своей относительной простоте этот способ индексирования не является оптимальным.
- Во-первых, Google вам не обещает, что после добавления страницы через сервис AddURL поисковый робот обязательно проверит ресурс и добавит его в индекс.
- Во-вторых, вам придется отправлять запрос на индексирование каждой страницы вручную по одной.
Поисковый робот – специальная поисковая программа, созданная, чтобы проверять сайты в индексе на наличие изменений, и добавлять в индекс новые ресурсы.
Продвинутый метод Google Search Console (GSC).
Это мощный SEO-инструмент для работ по оптимизации в поисковой системе Google. После регистрации ресурса в Google Search Console поисковый робот автоматически отправляет сайт на индексацию и добавляет его в поисковик.
Другие функции Google Search Console:
- Временное или постоянное удаление URL из индекса.
- Отправка запрос на переобход сайта на основе xml карты сайта.
- Просмотр запросов, по которым виден ресурс в выдачи.
- Работа со структурированными данными (формирование сниппета).
- Проверка доступа на основе robots.txt.
Полный список возможностей Вы можете посмотреть в справке Google.
Техническая справка
Файл sitemap.xml
Чтобы все страницы вовремя обновлялись, в GSC необходимо указать ссылку на файл sitemap.xml, находящийся на вашем сайте. Это файл, в котором содержится информация об опубликованных страницах. Так же в файле содержатся сведения о последнем изменении документов и средней частоте обновления информации.
Как создать
В популярных CMS-системах (CMS – система управления сайтом) данная функция реализована автоматически или с помощью дополнительных SEO-плагинов. Если же ваш сайт написан без помощи CMS, рекомендуем обратиться к вашему разработчику за помощью. Так же обратите внимание, что для одностраничных сайтов файл sitemap.xml не нужен вовсе, Гугл без проблем добавляет их в поиск.
Robots.txt
Еще один важный служебный файл. С помощью него Вы разрешаете или запрещаете поисковым системам индексировать страницы или целого каталога.
Зачем запрещать индексацию страниц?
- Это может быть страница-дубликат, которые появляются автоматически в некоторых CMS системах.
- Страница работает, но над ней еще ведутся работы.
- Запретить к индексу служебные разделы: админ панель, системные файлы…
Ускорение индексации и сохранение авторского права за собой
У Google нет единого механизма определения первоисточника контента в отличие от Яндекс. Однако Вы можете с большей вероятностью присвоить «себе авторство» использую публикации в социальных сетях.
Поисковые боты, так называемые «пауки», практически живут в социальных сетях для того, чтобы индексировать постоянно создаваемый контент. Ссылки с небольшим анонсом на новую страницу из Google+ и других популярных социальных сетей значительно увеличат вероятность быстрой индексации.
Вместо заключения
Если Вы не хотите самостоятельно заниматься техническими вопросами SEO-оптимизации, специалист за небольшую плату легко справиться с вопросом быстрой индексации.
