Как осуществляется индексация. Выявление проблем индексации URL

В прошлый раз в серии из трех статей мы познакомились с первой статьей, где рассмотрели первую стадию работы поисковика: . Также мы рассмотрели возможные методы работы SEOшника с каждой из стадий.

Перед тем как продолжить, я считаю, что будет целесообразным освежить в памяти о чем шла речь в первой статье:

Поисковик обнаруживает, индексирует и ранжирует веб-страницы. должны основывать свои тактики продвижения на этих трех стадиях работы поисковика. Поэтому были сделаны следующие выводы:

• Все дело в обнаружении страницы
• Все дело в индексации.
• Все дело в ранжировании.

Но конечно же, Google как и любой другой поисковик существуют с одной целью - построить и развить бизнес, удовлетворяя потребности пользователей. Поэтому мы должны постоянно помнить следующее:

• Все дело в пользователях.

Зная все вышесказанное, мы можем разработать несколько методов продвижения на каждую из фаз работы поисковика, что в конце может привести к единой SEO стратегии.

Индексация сайта

Индексация является следующим шагом после обнаружения страницы. Выявление дубликатов контента является главной функцией данного шага работы поисковика. Возможно не будет преувеличением, если я скажу, что все крупные сайты имеют не уникальный контент хотя и на международном уровне.

Интернет-магазины могут иметь одинаковый контент в виде одних и тех же товаров. Об этом мы с точностью можем заявить, имея большой опыт работы с такими продавцами как Zappos и Charming Shoppes.

Еще больше проблем с новостными порталами известных газетных изданий и публикаций. Маршалл Симондс и его команда, работая над The New York Times и другими изданиями, ежедневно сталкиваются с дубликатами контента, что является основной SEO работой.

К сайту никогда не будут специально применяться санкции, если . Но существуют фильтры, которые способны отличать одинаковый или слегка измененный контент на множестве страниц. Эта проблема является одной из главных для SEO.

Дубликаты также повлияют на видимость сайта, поэтому нужно свести количество дубликатов к нулю. Различные версии одного и того же контента в индексе поисковика тоже не лучший результат оптимизации.

Мэтт Каттс , в своем интервью с Эриком Энгем, подтвердил существование "crawl cap" (колпак видимости сайта), который зависит от PR сайта (не тулбарного PR) и рассказал о том, какие проблемы могут появиться из-за :

Представьте, если мы сканируем три страницы сайта, а затем узнаем, что две из них являются копиями третьей. Мы выбрасываем эти две страницы и оставляем только одну и поэтому получается, что сайт имеет гораздо меньше хорошего контента... Но чем больше PR, тем больше шансов, что страницы не исчезнут из поиска...

Включает полнейшую информацию для любого серьезного SEOшника по проблеме дубликатов контента. Хотя и большинство, что вы услышите там будет не новостью, но подтвердить некоторые догадки и решения, с которыми мы сталкиваемся ежедневно, будет не лишним.

Определение уровня "проникновения" поисковика в сайт, "колпака видимости сайта", количества дубликатов контента, а затем их устранение, улучшит как видимость сайта в глазах поисковика, так и индексацию сайта.

Как определить качество индексации вашего сайта?

Существует несколько отличных способов узнать это:

• Анализ логов или анализ количества трафика по URL. Составив график по этим данным вы увидите, какие из частей сайта не нравятся поисковикам. А это и укажет на проблемы индексации.
• Анализ внутренней перелинковки сайта. Какие из частей сайта имеют меньше всего внутренних ссылок? Какие из частей сайта расположены в 6-7 кликах от главной страницы?
• Использование таких запросов как: site:jcrew.com inurl:72977 выявит дубликаты страницы. Самыми худшими дубликатами для являются дубликаты страниц с описанием товаров. Используйте похожие запросы в поиске: intitle и allintitle .
• Использование " " для объединения дубликатов и их сведения к главной версии . Но будьте осторожны, так как не правильное использование " " может навредить вашему сайту.
• Дайте Google и Yahoo (через панели вебмастеров) знать, что в поиске появляются дубликаты контента и во время следующего посещения сайта их можно не учитывать.
• Используйте robots.txt для запрета индексации ненужных страниц и контента, который не предназначен для поисковиков. Кроме этого, для запрета индексации некоторых частей страницы вы можете использовать тег meta robots и noindex.
• Использование XML карт сайта и Google Webmaster Tools для сравнения индексации по вертикали. (Google покажет проблемы в индексации для предложенной карты сайта).

Количество дубликатов и результаты поисковой выдачи

Проблема количества дубликатов для SEO очень сложна и требует отдельного рассмотрения. Если коротко, то проблему дубликатов можно решить использованием "rel=canonical" и стандартного "View All page" на страницах, которые служат главной.

Результаты поисковой выдачи - другая уникальная ситуация. Для управления этими результатами существует много способов.

Одним из хороших способов управления результатами поиска на сайте является канонизация этих результатов к определенной поисковой странице, которую потом сводят к качественной странице с контекстными и полезными ссылками. Это конечно не лучший выход из ситуации и использовать его лучше для поисковых страниц, которые не являются основой навигации сайта.

Выявление проблем индексации URL

Во время выявления проблем индексации сайта, любые "слабости" структуры URL страниц сайта всплывут наружу. Особенно это касается сайтов корпоративного уровня, где вы столкнетесь со всеми видами неожиданных результатов в индексе поисковика.

Эти проблемы возникают, когда у сайта появляется множество различных видов пользователей и членов администрации. Конечно же мы сами часто совершаем ошибки, SEO – не является решением всех проблем.

Индексация сайта является главным компонентом видимости сайта, индекса, ранжирования и обычно является главным объектом внимания SEOшников. Как следует почистите индекс вашего сайта и насладитесь эффективностью сканирования, скоростью индексации вашего сайта.

Оставайтесь с нами, так как будет еще и третья, заключительная статья из этой серии.

Я нашел еще 16 новых способов того, как ускорить индексацию сайта.

Смысл ускорения индексации - привлечь поисковых роботов (пауков) на сайт. Главное, знать, где эти пауки водятся 🙂 .

1. Сервисы вопросов и ответов

В последнее время сервисы вопросов и ответов становятся очень популярными. На них заходит большое количество посетителей, контент постоянно обновляется, и поисковые пауки там просто живут.

Смысл не в том, чтобы спамить ссылки на свой сайт в каждом комментарии. Лучше сделать один осмысленный комментарий, чем несколько несодержательных. Найдите категорию по тематике своего сайта и почитайте ее некоторое время. Затем найдите вопрос, в котором вы компетентны, и помогите задавшему вопрос человеку содержательным и полезным советом, к месту указав ссылку на свой сайт.

Со временем будут появляться новые сервисы, поэтому время от времени набирайте запрос "вопросы и ответы" в поисковике, чтобы находить новые.

В рунете социальных сетей для блоггеров пока немного, но они прекрасно индексируются поисковиками, а также ставят прямые ссылки на ваш сайт. Изучите материалы на этих сайтах, и, если тематика вашего сайта соответствует тематикам, публикуемым на этих сайтах, опубликуйте 1-2 анонса наиболее интересных материалов на вашем сайте. Затем время от времени можете добавлять в них анонсы своих лучших статей.

Был еще хороший сервис BlogParad.ru, но с недавнего времени он не работает.

3. Комментарии в популярных блогах

Поисковые пауки часто посещают популярные блоги. С помощью комментария на таком блоге можно эффективно привлечь поискового паука на свой сайт. При этом, естественно, нужно написать толковый комментарий. Ссылку в тексте комментария делать не нужно - это во многих случаях приведет к удалению комментария. Достаточно при добавлении комментария указать адрес своего сайта в соответствующем поле. Имя пишите, как имя, а не ключевое слово.

Как найти популярные блоги? Очень просто. Зайдите в рейтинг блогов Яндекса, и вы найдете много популярных блогов.

4. Посты и комментарии в популярных сообществах

Сообщества отличаются от блогов тем, что в них можно вступить и опубликовать свою заметку. В сообществах можно оставлять комментарии, как и на обычных блогах. Ни в коем случае нельзя спамить в сообществах. Вас оперативно удалят из него и закроют доступ.

В популярных сообществах участвуют десятки тысяч участников. Для того, чтобы найти популярные сообщества, зайдите в рейтинг сообществ Яндекса.

Большинство сообществ находятся на блоговых сервисах LiveJournal, Liveinternet и Blogs.Mail.ru. Для того, чтобы вступить в сообщества, нужно сначала зарегистрироваться в этих сервисах. После этого вы получите в свое распоряжение блог.

Кстати, вовсе необязательно публиковать ссылку на свой сайт в сообществе. Достаточно написать несколько постов на своем свежем бесплатном блоге, и в них поставить по 1 ссылке на свой сайт. Затем публикуете заметку или комментарий в сообществе без каких-либо ссылок. Поисковый паук зайдет через ссылку на ваш профиль и проиндексирует ваш бесплатный блог, а следом и ваш сайт.

5. Заказ постов на сервисе Блогун

Еще один способ ускорения индексации сайта - заказать платный пост на блогах через сервис Блогун . Там вы найдете множество блогов по любым тематикам, которые готовы написать о вашем сайте посты в следующих форматах:

Блоги очень быстро индексируются поисковиками, поэтому размещать в них ссылки на свой сайт очень эффективно для ускорения индексации.

Еще важное преимущество Блогуна, которое мне очень нравится - вы платите за ссылку на свой сайт только один раз, и она остается на все время существования блога. За нее не надо платить ежемесячно, как на других биржах ссылок.

🔥 Кстати! Я планирую выпустить платный курс по продвижению англоязычных сайтов. Если интересует, можете подать заявку в ранний список через эту форму , чтобы первыми узнать о выходе курса и получить специальную скидку.

Приглашаю вас подписаться на мои каналы в Telegram:

После того, как вы организовали блог на вашем сайте, в админке зайдите в

Options - Writing - Update Services
(Настройки-Написание-Сервисы обновления)

и в самом низу вы найдете список сервисов для пинга.

Затем скопируйте мой список , и вставьте их в окно. Теперь при публикации любого поста на вашем блоге все эти сервисы будут получать сигнал о том, что у вас появился новый материал, и поисковые пауки в ближайшее время посетят ваш блог и сайт.

7. Добавьте RSS ленту своего сайта в RSS агрегаторы

RSS агрегаторы - это сайты, которые публикуют анонсы материалов с различных сайтов, используя их RSS ленты. RSS агрегаторы хорошо индексируются поисковиками во многом благодаря тому, что на них много постоянно обновляющегося контента, то есть анонсов из RSS лент.

Вы можете бесплатно добавить RSS ленту своего сайта в RSS агрегаторы. Если у вашего сайта нет RSS ленты, то организуйте блог. Все блоги имеют RSS ленту, поэтому вы сможете добавить ее в RSS агрегаторы.

8. Перенаправьте RSS ленту своего сайта через Feedburner

По моим наблюдениям, ссылка в подписи на форуме оптимизаторов Searchengines.ru помогает поисковикам проиндексировать новый сайт в течение 1-4 дней. Ссылка в подписи на англоязычном форуме вебмастеров DigitalPoint позволяет роботу Google проиндексировать ваш сайт в течение 15-45 минут.

11. Добавьте свою новость в StumbleUpon или Digg

С помощью этого метода можно привлечь робота Google на свой сайт за 5-30 минут. Но для этого нужно сделать одну интересную статью на английском и опубликовать ее на своем сайте. Затем регистрируетесь в социальных сетях StumbleUpon и Digg и добавляете туда свою англоязычную страницу.

Подробнее о продвижении сайтов с помощью StumbleUpon вы можете прочитать в моей статье .

12. Создайте блог на бесплатных блоговых сервисах

Блоги на популярных сервисах довольно быстро индексируются поисковиками. Достаточно создать там блог и написать несколько статей или заметок со ссылками на ваш сайт. Для дополнительного ускорения индексации можете добавить друзей или оставить комментарии на популярных блогах. Обычно робот приходит на сайт через 1-5 дней после создания бесплатного блога.

Вот список наиболее популярных блоговых сервисов:

13. Опубликуйте пресс-релиз

Пресс-релиз - это отличный способ ускорить индексацию сайта. Подробнее о пресс-релизах и о том, как их использовать для продвижения сайтов вы можете прочитать в моей статье .

Для ускорения индексации англоязычных сайтов вы можете использовать мою свежую .

Постовой - это форма рекламы на блогах, когда блоггер ставит прямую ссылку на рекламодателя в начале или конце поста. Выбирайте блоги, которые часто обновляются и имеют хорошую посещаемость. Затраты составят от 3 до нескольких десятков долларов на одну ссылку в постовом.

Заходите на понравившийся вам блог, ищите раздел "Реклама на блоге" и пишите блоггеру. Большинство блоггеров предлагают рекламу на своих блогах, поэтому проблем найти подходящий блог не возникнет.

15. Напишите гостевой пост на популярном блоге

Гостевой пост - это когда вы пишете интересную и полезную статью по определенной тематике и по договоренности с блоггером высылаете ему свою статью, и он ее публикует на своем блоге. При этом указывается ваше авторство и ставится ссылка на ваш сайт.

Если вы обладаете профессиональными знаниями в какой-либо сфере и можете написать интересную статью, то этот способ замечательно подходит для ускорения индексации. Пишите статью и высылайте ее одному или нескольким блоггерам с указанием, что она уникальная. Многие блоггеры охотно разместят ваш материал, если он подходит их блогу по тематике, а вы эффективно ускорите индексацию своего сайта.

16. Возьмите интервью у популярного блоггера

Казалось бы, зачем брать интервью для ускорения индексации сайта? Дело в том, что многим блоггерам нравится давать интервью, и в большинстве случаев они поставят прямую ссылку на страницу с интервью на вашем сайте. Поисковые роботы часто посещают популярные блоги.

Этот метод подходит не для всех сайтов, но если у вас молодой и интересный тематический сайт или блог, то это хороший способ не только ускорить индексацию сайта, но и получить дополнительных посетителей на свой сайт.

Подробнее о том, как брать интервью, вы можете прочитать в моей статье .

В целом могу сказать, что если вы используете вышеперечисленные методы ускорения индексации сайта, а также методы из статьи , то вы гарантированно приведете поисковых роботов на свой сайт.

P.S. Постксриптум сегодня - потрясный видеоролик в продолжение статьи о настоящих фанатах граффити. Я такого еще не видел:

• Tutorial

Недавно мы закончили курс по SEO в Нетологии и составили для себя чек-лист того, что обязательно нужно сделать на сайте «Я люблю ИП » для поисковой оптимизации. Но эти советы универсальны для любого проекта. В статье вы найдёте список практических рекомендаций со всего курса из 13 лекций от 8 разных специалистов, а также полезные ссылки и сервисы, которые помогут вам улучшить SEO вашего сайта.

Для кого эта статья:

• для веб-дизайнеров и разработчиков, которые хотят создавать сайты, изначально оптимизированные под SEO,
• для владельцев интернет-ресурсов, которые хотят самостоятельно разобраться в SEO, чтобы увеличить поисковый траффик.

Дисклеймер: эти советы вряд ли помогут вам выйти в топ по высокочастотным запросам, но вы сможете исправить все технические и текстовые ошибки на сайте, чтобы повысить свои позиции.

Работы по SEO в основном состоят из 5 этапов:

1. Технический аудит сайта.
2. Аудит коммерческих факторов.
3. Подбор семантического ядра.
4. Внутренняя и внешняя оптимизация сайта.
5. Наращивание ссылочной массы.

Технический аудит сайта

1) Проверьте, все ли страницы сайта находятся в поиске:

• по количеству результатов в поиске (в Google - при помощи site:site.ru, в Яндексе - при помощи host:site.ru),
• в Яндекс.Вебмастер (Индексирование → Страницы в поиске) или в Google Search Console (Индекс Google → Статус индексирования).

2) Проверьте наличие дублей на сайте. Дубли - это страницы с одинаковым содержанием, но с разными URL. Дубли могут быть полные (если контент совпадает на 100 %) или частичные (с высоким % совпадения). Дубли страниц необходимо удалять.

3) Проверьте наличие пустых страниц (которые не содержат контента). Пустые страницы можно:

• удалить,
• закрыть от индексации (в файле robots.txt, см. ниже ),
• наполнить контентом.

4) Проверьте наличие мусорных страниц (которые не содержат полезного контента). Мусорные страницы можно:

• закрыть от индексации,
• сделать полезными.

5) Проверьте наличие файла robots.txt. Это текстовый файл в корневой директории сайта, который содержит специальные инструкции для поисковых роботов. Подробнее см. справку Яндекса и Google . Размер файла не должен превышать 32 КБ.

6) В файле robots.txt можно указать общие правила для всех поисковых систем и отдельно для Яндекса. В правилах для Яндекса должна быть дополнительно указана директива Host (главное зеркало вашего сайта с www или без) и директива Sitemap с ссылкой на карту вашего сайта. Проверить файл robots.txt можно в Яндекс.Вебмастере .

User-agent: *
Disallow: /contacts/

User-agent: Yandex
Disallow: /contacts/
Host: www.iloveip.ru
Sitemap: http://www.iloveip.ru/sitemap.xml

Пример файла robots.txt с нашего сайта

7) Проверьте наличие файла sitemap.xml. Это аналог карты сайта, предназначенный специально для поисковых роботов. Подробнее см. справку Яндекса и Google . Создать карту сайта можно по ссылке . Проверить файл sitemap.xml можно в Яндекс.Вебмастере .

8) Проверьте наличие «битых» ссылок (ссылок на несуществующие или недоступные страницы). Необходимо удалять все битые ссылки, как внешние, так и внутренние. Проверить битые ссылки можно в программе Screaming Frog SEO Spider Tool (загружается на компьютер, есть бесплатная версия) или онлайн с помощью инструмента Технический анализ от SeoWizard (сервис платный). Также битые ссылки можно проверить в Яндекс.Вебмастере: Индексирование → Статистика обхода (см. HTTP код 404).

9) Проверьте наличие редиректов на сайте. Виды редиректов:

• 301 - запрошенный документ окончательно перенесен на новый URL,
• 302 - запрошенный документы временно доступен по другому URL.

Редиректами лучше не злоупотреблять, так как наличие на страницах сайта ссылок, ведущих на страницы с редиректом, способствует «утере» ссылочного веса.

Проверить можно в Яндекс.Вебмастере: Индексирование → Статистика обхода (см. HTTP код страницы).

10) Проверьте скорость загрузки сайта (должна быть менее 3 сек). Это один из важных факторов, который влияет на ранжирование сайта поисковыми системами. Проверить можно с помощью Google PageSpeed или в Google Search Console (Сканирование → Статистика сканирования → Время, затраченное на загрузку страницы).

11) Настройте ошибку 404 для удалённых или несуществующих страниц. Это можно сделать в файле.htaccess. Подробнее см. справку Яндекса .

12) Проверьте ответы сервера и файл.htaccess. Наиболее частые ошибки, которые встречаются:

• Доступны обе версии сайта с www и без (например, site.ru и www.site.ru). Это плохо влияет на индексацию, так как поисковик старается исключать дубли и может выбрать в качестве оригинала совсем не ту страницу, которую вы продвигаете.
• Отсутствуют редиректы для страниц со « /» на конце и без него. Если страницы сайта без слэша на конце и со слэшем отдают ответ сервера 200 (страница доступна), то попадая в индекс поисковых систем они представляют собой полные дубли.

13) Проверьте правильность URL. Неконечные страницы (разделы, подразделы) должны содержать «/» на конце URL, а конечные страницы (страницы товаров, статей) не должны содержать «/». Но применять этот формат рекомендуется только к новым страницам, так как для старых это приведёт к потере возраста документа.

14) Старайтесь использовать «ЧеловекоПонятныеУРЛы» (сокращенно «ЧПУ») или красивые и дружественные адреса URL. Пример отсутствия ЧПУ: yoursite.net/viewpage.php?page_id=23. Основные рекомендации:

• можно использовать иностранные слова (/contacts/) или транслит (/kontakty/),
• в качестве разделителя между словами используйте дефис «-»,
• между разделителями «/» в адресе URL должно быть не более 2–3 слов,
• длина URL не должна превышать среднее значение по конкурентам.

15) Соблюдайте иерархию папок в URL. Например:

site.ru/название-раздела/назавание-подраздела/конечная-страница

Это поможет Яндексу составить навигационные цепочки и отразить их в сниппете вашего сайта при выдаче в поиске. Подробнее см. справку Яндекса .

16) Проверьте отображение сайта на мобильных устройствах. Это можно сделать в Яндекс.Вебмастере (Инструменты → Проверка мобильных страниц) или в Google Search Console .

17) Укажите в head кодировку страниц meta charset=«utf-8».

18) Проверьте наличие и уникальность тегов title, description и h1 на каждой странице.

19) Тег title должен быть максимально близко к началу head.

20) Старайтесь добавить в тег title все ключевые слова, при этом самое популярное ключевое слово должно быть ближе к началу тега.

21) Максимальная длина тега title - 150 символов, оптимально - 60 символов.

22) В теге title не должны повторяться одинаковые слова (максимум не более 2 раз), можно использовать синонимы, близкие слова или другие слова из запросов. Например: Займ в банке под залог комнаты. Получить кредит под залог комнаты в Москве.

23) Для разделения разных фраз в теге title (например, названия страницы и сайта) используйте символ «|».

24) Тег description не влияет на ранжирование сайта прямо, но поисковые системы могут использоваться его содержимое для сниппета сайта при выдаче.

25) Длина description может быть от 100 до 250 символов, оптимально - 155 символов. Обычно это одно-два осмысленных предложения для описания страницы, включая поисковые запросы.

26) Укажите в head метаданные по Open Graph Protocol для правильного представления сайта в социальных сетях.

27) Добавьте в корневую директорию фавикон сайта.

28) Стили и скрипты должны загружаться в head отдельными файлами.

29) На странице может быть только один заголовок h1.

30) Заголовок h1 не должен копировать title.

31) Заголовок h1 может содержать от 1 до 7 слов и должен включать точное вхождение главного поискового запроса. Например: Займ под залог комнаты.

32) Старайтесь не использовать вложенные теги в теге h1 (например, span, em, a href и т. д.).

33) Соблюдайте последовательность заголовков h2-h6 и включайте в них остальные ключевые слова. Теги h2-h6 должны использоваться только для разметки SEO-текстов.

34) Используйте семантическую вёрстку (для параграфов - p, а не div), старайтесь включать ключевые слова в списки, таблицы, картинки (теги alt, title), выделения (em, strong).

35) Атрибуты alt и title для картинок должны отличаться. Alt - это альтернативный текст для картинки, если она не загрузилась. Title - это заголовок картинки, который всплывает при наведении на картинку, а также выходит в поиске.

36) Добавьте на сайт микроразметку Shema.org . Валидатор микроразметки в Яндекс.Вебмастере .

37) Если вы планируете переезд сайта на https, почитайте эту .

Аудит коммерческих факторов

38) Коммерческие факторы важны для коммерческих сайтов.

39) На сайте должны присутствовать контакты:

• телефоны,
• онлайн-консультант,
• обратный звонок,
• адрес, схема проезда,
• график работы.

40) Разместите на сайте юридическую информацию:

• договор-оферту, условия оказания услуг,
• реквизиты компании,
• условия обмена/ возврата,
• условия доставки.

41) Разместите на сайте ассортимент:

• прайс-лист,
• количество товаров в наличии,
• скидки, акции.

42) Добавьте информацию, которая вызывает доверие:

• отзывы,
• портфолио (примеры работ),
• видео,
• вакансии.

43) Разместите электронную почту на своём домене (например, [email protected]).

44) Если на сайте публикуются новости, следите за их обновлением.

45) В копирайте (с) укажите текущий год.

46) Стремитесь, чтобы дизайн сайта был современным и адаптированным для мобильных устройств.

Подбор семантического ядра

Подбор семантического ядра - это большая тема, которая заслуживает отдельной статьи. Здесь мы остановимся на основных принципах.

47) Прежде, чем перейти к подбору семантического ядра, необходимо понять, какие бывают типы пользовательских запросов и по каким запросам вы будете продвигать сайт:

• Навигационные (брендовые) запросы - поиск конкретного сайта или места в сети интернет. Обычно по таким запросам сайты находятся на первом месте, и продвижение не нужно.
• Информационные запросы - поиск информации, неважно на каком сайте (например, как лечиться от простуды).
• Транзакционные запросы - пользователь хочет совершить какое-то действие («скачать», «купить» и т. д.). Коммерческие запросы всегда являются транзакционными. Но не все транзакционные запросы являются коммерческими (например, «скачать бесплатно»).

Коммерческие страницы (интернет-магазины, сайты компаний) нужно продвигать по коммерческим запросам, информационные (форумы, блоги, статьи) - по информационным.

48) Определить, каким является запрос, информационным или транзакционным, можно при помощи поиска. Введите фразу и посмотрите на результат поисковой выдачи. Если там в основном информационные статьи, то запрос информационный, если коммерческие страницы - то коммерческий.

Роботы поисковых систем в обязательном порядке добавляют в базу данных информацию обо всех размещенных сайтах. Собранные показатели специальным образом обрабатываются, и в итоге мы получаем индекс - т. е. определенную, так сказать, выжимку из документов, которая очень пригодится для SEO-продвижения. Индексацию можно осуществить собственноручно (добавлять URL веб-ресурса в форму поисковика) или автоматически (роботы сами осуществляют переход по гиперссылкам, сканируют файл-карту sitemap.xml). Индексация - необходимый этап грамотно выстроенного SEO-продвижения, ведь она влияет на ранжирование портала.

Особенности процесса

Каждый поисковик располагает роботами, т. е. определенными программами, которые регулярно собирают данные о вашем сайте, анализируют весь html-код. Именно поэтому так важно правильно заполнять теги:

• h1, h2 (заголовок и подзаголовок);
• title;
• description и т. д.

Чтобы SEO-продвижение действительно могло считаться эффективным, не забывайте также про создание карты сайта, перелинковку и микроразметки.

Как осуществляется индексация

Существуют основные методы индексации:

• В этом случае следует создать ресурс, наполнить его контентом на соответствующую тематику, оформить все теги и просто дождаться поискового робота. Чтобы ускорить процесс, оставляем ссылку на наш сайт с другого, более авторитетного. Эта услуга платная, но положительно влияет на SEO-продвижение (и индексацию в частности).
• Отправьте запор на индексирование в ПС. Да, вам придется отстоять очередь, но когда придет время, поисковой робот отправится по вашему адресу и занесет сайт в каталог. Причина, по которой чаще всего выбирают этот метод, способ бесплатный.

Вы можете совместить оба варианта, т. е. заполнить специальную форму и проставить ссылки со сторонних ресурсов. Занимаясь SEO-продвижением, помните, что даже если вас и посетил робот, то он не будет индексировать сразу все станицы портала. Здесь ничего не поделаешь, придется подождать. Следует так же отметить, что роботы в каждом ПС (Google, Яндекс, Mail и т. д.) свои, а значит невозможно предсказать, сколько времени займет создание индекса в конкретном случае.

Как можно упростить процесс

Для SEO-продвижения крайне необходимо создать действительно грамотный и качественный сайт, который будет хорошо восприниматься не только целевой аудиторией, но и поисковыми системами. Существуют такие рекомендации при создании сайта:

• Поскольку структура портала все же имеет прямое влияние на заинтересованность поисковиков в индексации, желательно создать определенные страницы, ссылающиеся на веб-документы, расположенные внутри портала. Это облегчит SEO-продвижение, поскольку программы автоматически будут переходить на внутренние разделы.
• Чем чаще вы обновляете ресурс, тем больше он привлекает внимание роботов. Советуют регулярно выкладывать хотя бы небольшие статьи в блог, новости или просто заметки/видеоролики. Как в случае и с другими параметрами SEO-продвижения, индексация будет успешной только в том случае, если вы работаете с уникальным контентом.
• Перелинковка страниц на сайте очень полезна, особенно если вы предлагаете похожие товары.

Что касается создания карты сайта, то здесь можно столкнуться с определенными проблемами, ведь робот при изучении «тяжелой» площадки останавливается, проверив только несколько первых ссылок. Если SEO-продвижением занимается профессионал, то он знает, как обойти этот нюанс. Достаточно создать древовидную карту, т. е. каждый подраздел в этом случае получает собственную страницу, на которую легко попасть с главной. О том, как правильно организовать продвижение по трафику лучше посоветоваться со специалистами, так как в этом деле существует много нюансов.