О чем эта статья?
Одна из проблем, с которой могут столкнуться веб-сайты с очень большим количеством страниц (порядок: несколько десятков миллионов страниц), — это одинаковые метатеги заголовка и описания на всех этих страницах. В этой статье мы рассмотрим способы частичного улучшения SEO-ситуации в этом случае.
Что такое метатеги вообще и зачем они нужны?↓
Проще говоря, метатеги — это специальные разметки на странице, которые не видны пользователю самой страницы, но необходимы поисковым системам, чтобы понять, как назвать сайт в результатах поиска и какое краткое описание предоставить. Чем более информативны и привлекательны мета-заголовок и мета-описание, тем привлекательнее сайт для пользователя в результатах поиска. Это увеличивает количество кликов по нему и, как следствие, органический трафик на сайте – одна из основных целей SEO. Пример на скриншотах ниже.
Выдержки из результатов поиска
Теги в коде
Оглавление
Способ 1. Уникальное название и описание (капитан очевиден)
Способ 2: 301 редирект (при наличии нерелевантных страниц)
Способ 3: директива Clean-param в robots.txt (только для сканеров Яндекса)
Способ 4: заблокировать индексацию страницы с помощью метатега robots (не работает, если директива запрещена в robots.txt)
Способ 5. Добавьте канонический метакод (рекомендуется для сканеров)
Уникальное название и описание
Самое первое, что приходит на ум, когда вебмастер жалуется на большое количество одинаковых метазаголовков и метаописаний на страницах, — сделать их уникальными. Это хорошая идея, но что делать, когда таких страниц не 5 или 10, а 5 или 10 миллионов?
Основная хитрость в том, что вам не нужно вручную редактировать все метатеги заголовка и описания. Как правило, каждая веб-страница имеет некоторую ключевую уникальную информацию (в чем еще смысл веб-страницы?), которую можно «перетащить» в мета-заголовок и мета-описание. Например, каждая статья имеет заголовок и краткое описание (они идеально подходят для использования в мета-заголовке и мета-описании, если, конечно, статьи на вашем сайте не имеют разных заголовков и другого контента). Каждый товар имеет свое уникальное имя и описание и так далее. Вам просто нужно настроить «подтягивание» этих информационных полей к соответствующим метатегам. Если описание статьи содержит >250 символов, то, кстати, нет ничего страшного в том, чтобы сжать текст до последней точки, укладывающейся в заданный лимит. Обычно первые 200–250 символов содержат достаточно ключевой информации и ключевых слов.
Можете привести пример «на пальцах»?↓
Конечно!
Допустим, у вас есть интернет-магазин «КупиВсе», занимающийся продажей бытовой техники. Теперь на странице каждого товара мета-заголовок и мета-описание просто дублируются с главной страницы, то есть:
мета-заголовок как есть: Покупайте товары в «КупиВсё» — крупном интернет-магазине по продаже бытовой техники.
метаописание как оно есть: В большом интернет-магазине “КупиВсё” много разной бытовой техники! Чайники, утюги, мультиварки и другая бытовая техника – купить онлайн.
То есть на странице чайника «Супер Чайник ХХХ» заголовок и описание, описанные выше, теперь такие же, как и на главной странице интернет-магазина. Теперь на странице каждого продукта добавьте название продукта к этим метатегам и получите:
мета-заголовок будет: Купить Super Kettle XXX в «КупиВсё» — крупном интернет-магазине по продаже бытовой техники.
метаописание должно быть: В большом интернет-магазине «КупиВсе» есть ХХХ Супер Чайник и много разной бытовой техники! Чайники, утюги, мультиварки и другая бытовая техника – купить онлайн.
Бинго! Настроив таким образом автоматическое заполнение заголовка и описания на всех карточках товаров, вы избавитесь от очень большого количества дублей. Только не забывайте, что в великом и могучем русском языке множество флексий и флексий, поэтому, учитывая инвариантность и неспряженность оформляемого текста, нужно правильно построить для него метазаголовок и шаблон метаописания.
301 редирект
Если у вас есть страницы, которые по каким-то причинам уже не актуальны (например, вы сделали новый дизайн части сайта и оказалось, что на двух разных URL есть страницы с одинаковым содержанием, но разным дизайном и версткой), от им вы можете настроить 301-редирект на соответствующие страницы. Подробнее о том, какие типы редиректов существуют, зачем они нужны и как их настроить, вы можете прочитать в этой или этой статье. Короче говоря, редирект 301 — это принудительное перенаправление с одного URL-адреса на другой, которое помогает скрыть ненужные URL-адреса от индексации.
На примере чайников для чайников↓
Рассмотрим тот же интернет-магазин «Купи всё» и карту чайника «Супер Чайник ХХХ». Допустим, вы решили изменить дизайн карточки товара, то есть у вас есть две страницы по разным URL-адресам с одинаковым контентом (и, следовательно, с одинаковыми метатегами). И таких товаров у вас миллион, то есть миллион дубликатов. Настроив 301 редирект с URL-адреса, ведущего на старую карту, на URL-адрес, ведущий на новую, вы заблокируете индексацию всех страниц на старых картах.
Директива Clean-param в robots.txt
Если у вас по каким-то причинам возникают GET-параметры при переходе на определенную страницу (например, вы отслеживаете поисковую систему, с которой был осуществлен переход, или другие параметры), вам необходимо закрыть их от индексации, чтобы краулеры не учитывали эти параметры страницы разные. Для этого вам необходимо добавить директиву clean-param в ваш файл robots.txt (подробнее об этом можно прочитать здесь) и добавить в него соответствующие параметры.
Важно отметить, что эта директива «реализуется» только ботами Яндекса, а боты Google — нет.
Вернуться к чайникам↓
Допустим, ваша стандартная карта чайника «Супер Чайник ХХХ» находится по следующему URL: www.kupivse.ru/bitovayatehnika/chayniki/123123. Однако вам важно отслеживать, какая поисковая система отправила вас на эту карточку, для которой вы добавляете UTM-тег.
В целом при переходе из Google URL-адрес выглядит так
www.kupivse.ru/bitovaya-tehnika/chayniki/123123?utm_source=google
и из яндекса
www.kupivse.ru/bitovaya-tehnika/chayniki/123123?utm_source=yandex
Чтобы избежать дублирования в этом случае, добавьте строку в файл robots.txt
Clean-param: utm_source
Бинго! Вы преодолели дублирование, вызванное получением параметров (только для ботов Яндекса).
Заблокируйте страницу от индексации с помощью метатега robots
Чтобы скрыть страницу от индексирования, вы можете добавить в заголовок следующий метатег:
<meta name="robots" content="noindex, nofollow">
Важно отметить, что если страница запрещена в файле robots.txt, директива метакода или заголовка не имеет никакого эффекта
Без чайников, но подробнее об этом метатеге↓
Толстый
Добавить канонический метатег
Практически ко всем описанным выше методам не мешало бы добавить лаконичный атрибут
rel="canonical"
. Он носит рекомендательный характер и помогает сканерам понять, какая страница считается канонической, тем самым уменьшая количество дубликатов.
Без чайников, но подробнее об этом метатеге↓
Толстый
Monstro — сервис для продвижения сайтов и сервисов https://t.me/monstrotraf