Правильная подготовка сайта к индексации в поисковых системах

Как понять, готов сайт для индексации поисковой системой или нет?

Вначале хочется сказать, что сайт не стоит выкладывать, когда он ещё не готов. Для стадии разработки сайта уместна следующая запись в файле robots.txt:

User-agent: * # от всех роботов
Disallow: / # скрыть всё от индексации

Спросите почему? Это нужно для того, чтобы робот не проиндексировал недоделанную страницу или лишнюю информацию. Если вы что-либо забыли сделать по сайту - обновить мета-информацию о сайте, исправить грамматические и другие ошибки, скрыть от индексации внутренние неинформативные ссылки средствами (nofollow, noindex) - поисковик сразу сделает Вам низкий рейтинг, некорректную выдачу или что-либо другое.
Поэтому НЕ надо торопиться с индексацией сайта.

Правильная подготовка к индексации. По пунктам

1) Разработка title и meta-тегов страницы или сайта. Среди них следующие теги: title (заголовок), keywords (ключевые слова), description (описание). В них нужно максимально сжато сообщить основную идею и ключевые слова.



Теперь об объёмах и смысле:
В title - не более 50-60 знаков. На некоторых сайтах делают и до 200. Здесь будет заголовок. Один из важнейших тегов для продвижения.

В description - не более 200. Не перечисление слов, а читабельные словосочетания, а в лучшем случае сложносочинённые предложения. Не пугаемся, пример ниже.

В keywords, по-хорошему, не более 500-600, но можно дойти и до 1000. Здесь указываем ключевые слова и словосочетания. Абсолютно всё, что Вы ассоциируете с запросом, приводящим на Ваш сайт. Однако, в последнее время из-за сборной солянки в ключевых словах, данному тегу уделяется меньше всего внимания.

Как водится, рассмотрим пример
Допустим Вы хотите создать сайт объявлений. Рассмотрим вариант для него:

<title>Доска бесплатных объявлений N. Сайт бесплатных объявлений</title>

<meta name="keywords" content="Сайт бесплатных объявлений, частные обяъвлений и для компаний, купля и продажа, дать бесплатное объявление, найти, отдать бесплатно, даром." />

<meta name="description" content="Доска бесплатных объявлений nnn.ru: дать или найти объявления о купле-продаже, частные объявления и объявления компаний. " />

Также хочу написать про ещё один полезный meta-тег - revisit или revisit-after

<mеtа nаmе ="revisit" content="10" />

10 - количество дней, через которые Вы рекомендуете роботу вернуться на данную страницу.



Единственный минус данного тега в том, что им пользуется очень мало поисковых систем, большинство из них возвращаются на страницы исключительно по своему усмотрению.

2) скрываем служебные, внутренние и не информативные разделы сайта в robots.txt. Например, папки admin, images, includes, которые не содержат нужной для поисковика информации. Не стоит его засорять вставками с ссылками а-ля На главную, Мои сообщения и прочее. Всё это не нужно поисковику и при индексации пойдёт вашему сайту только в минус. Поиимо того, что данные, например, Вашей админ панели не должны быть в выдаче по запросу вашего сайта)

После открытия сайта для индексации (удаления вышеуказанных строк из robots), прописываем в robots.txt ПРИМЕРНО следующее (для каждого сайта будут свои скрытые папки):

User-agent: * # от всех роботов
Disallow: /admin/ # скрыть данные по admin-панели
Disallow: /images/ # скрыть от индексации изображения
Disallow: /includes/ # скрыть от индексации инклюды (сайд-бары, футеры и тп)
Disallow: /registration.php # можно скрывать конкретные файлы с подтверждением и формами регистрации

3) Теперь скроем ненужные ссылки на служебные разделы, которые располагаются в контенте. Ниже привожу пример того, как закрыть ссылку от индексации

<!--noindex--><a rel="nofollow" href="url">Название ссылки</a><!--/noindex-->

<!--А теперь на примерах-->
<!--noindex--><a rel="nofollow" href="settings.php">Настройки</a><!--/noindex-->
<!--noindex--><a rel="nofollow" href="exit.php">Выход</a><!--/noindex-->

Команда noindex создана только для Яндекса, а nofollow понятна всем поисковым системам.



4) Грамотно используем html-теги заголовков h и выделения текста жирным b. Поисковые роботы очень ценят информации, написанную в тегах заголовков и выделенния жирным. Используйте их по-минимуму! Старайтесь избегать выделения ненужной информации! Если хотите что-либо выделить жирным, но не собираетесь вводить при этом лишнюю информацию в выдачу, то выделяйте текст тегами strong.

<p>Так выделяю <b>слово</b>, которое непосредственно относится к тематике сайта. Оно Несёт смысловую нагрузку.</p>

<p>Просто выдеяю в тексте <strong>слово</strong>. Оно не несёт смысловую нагрузку.</p>

4) У изображений подписываем комментарий.

<img src="url" alt="Изображения с какой-либо схемой">

5) Теперь убираем важную информацию из java script.
Большинство поисковых систем не индексирует информацию, записанную в Java Script. Поэтому либо Выносим её Отдельно, либо не пишем в Java Script.

Эта информация может не проиндексироваться:

<script type="text/javascript">
    document.write('<h1>Важный для Вас заголовок</h1>');
</script>

6) Стараемся употреблять как можно меньше ключевых слов и словосочетаний в тексте. У SEO есть такое понятие как тошнота текста. Это когда поисковая система игнорирует текст или занижает рейтинг страницы при очень частом употреблении ключевых слов:

Например: Пишите сайт на html! Самый лучший язык - html! Рассмотрим характеристики новинки - HTML 5...

Тут соответственно поисковик затошнит от слова html.

7) Ну что, думаете всё сделали? Так вот теперь устраняем грамматические, орфографическе и другие ошибки. Если, например, Вы сделаете ошибку в словах прАдать, мОшину и других (утрирую, конечно, но всё же), то поисковая система так и будет выдавать Ваш сайт по данным некорректным запросам. Кто посетит сайт в этом случае - можете догадаться.

Надеюсь статья была полезна. Спасибо за внимание!