Переезд на ЧПУ: миникейс о том, как безопасно для SEO сменить адреса для 30 000 урлов

ЧПУ — это удобный адрес страницы сайта, иначе называется человеко-понятный урл. ЧПУ раскрывает суть содержимого страницы по написанию адреса.

ЧПУ — это один из пунктов SEO-аудитов сайтов. В какой-то момент позиции сайта перестали расти. И мы, и клиент заказывали внешние аудиты, чтобы найти точку роста для позиций, которую мы, возможно, упускаем, и в этих аудитах были рекомендации перевести на ЧПУ.

Мы не считали, что старые адреса страниц плохие и мешают продвижению. Страницы хорошо индексировались, на них были переходы по низкочастотным запросам, а иногда и по запросам с хорошей частотой. Адреса товаров были короткие и «со смыслом» в плане того, что это был не просто набор цифр, а артикул товара. Многие крупные интернет-каталоги использую артикул в качестве узла в формировании адреса страниц, имея намного более неповоротливый урл, при этом прекрасно чувствуют себя в поиске, например:

• https://www.wildberries.ru/catalog/17765348/detail.aspx?targetUrl=XS
• https://www.ozon.ru/context/detail/id/135725152/
• https://www.citilink.ru/catalog/mobile/notebooks/484748/

Мы провели анализ 16 конкурентов в тематике. Не было четкой закономерности по использованию ЧПУ на них. Каждый сайт делал ЧПУ так, как считал нужным:

• 5 сайтов имели вложенность в одну общую папку и далее шло название товара (папка каталога могла называться по разному). ЧПУ имели вид:
  — /products/kuhni-opera-bordignoncamillo
  — /products/italyanskaya-spalnya-philosophy-2016-02-fabriki-philipp-selva
  — /catalog/martini-mobili/
  — /item/175979-zhurnalnye-stoliki-zhurnalnyy-stolik-susanne-michelangelo-ulivi
  — /katalog/divan_gala_flou.html
• 8 сайтов имели вложенность в общую папку, далее шли другие вложенности по предметам/комнатам/еще чему-то/ и потом сам товар. Примеры таких ЧПУ:
  — /catalog/kitchens/kukhonnaya-mebel/17202/
  — /catalog/detail/6381268-6381268-spalnya-arkeos-oikos/
  — /kuhni/toncelli/sistema/
  — /catalog/kitchens/view-798.html
  — /katalog/mebel-so-sklada/krovati/krovat-palazzo-ducale-ciliegio-prama/
  — /mebel-so-sklada/spalni/spalnya-palazzo-ducale-ciliegio-prama/
• 1 конкурент вообще не именл ЧПУ https://www.italianskaia-mebel.ru/i_49577.htm?head=4405&r1=4405&ref=1#welcome_area
• 2 сайта имели битый подвисший узел, то есть если удалить последний уровень адреса (само название товара), то урл становился битым и отдавал код 404, например /italianskie-kuhni/cesar-arredamenti/unit.html — 200OK, а /italianskie-kuhni/cesar-arredamenti/ — 404.
• Такая же тема может встретиться у крупнейших ритейлеров, например https://www.dns-shop.ru/product/a51fe567b9a23332/fitnes-braslet-xiaomi-mi-smart-band-5/ и https://www.lamoda.ru/p/wr224ewlbhj1/clothes-wrangler-parka/, только здесь настроены редиректы, а не ошибка 404.

Все это примеры того, что ЧПУ и структура урлов — далеко не самый важный параметр.

Согласно рекомендациям Яндекса и Гугла, наши адреса вполне хорошие. Но наличие цифр, означающих артикул товара, для человека не давало представления, что именно за товар ему будет представлен на странице. В итоге совместно с клиентом было решено переходить на полноценные ЧПУ адреса.

Два основных вопроса, которые возникли у нас:

1. Вложенность товара в разделы.
2. Написание названия в ЧПУ самого товара.

Первым делом мы точно решили оставить нашу папку /catalog/ для вложенности товаров. Само написание общей папки не имеет значение, а у нас уже есть хороший повсеместно используемый уровень, который логично оставить.

Долго размышляли о том, нужно ли сделать вложенность внутри папки /catalog/, как у некоторых конкурентов, например, папку предмета или фабрики. Варианты, которые мы рассматривали:

1. общая папка /catalog/названиетовара/;
2. вложенность в разные папки предметов /divany/названиетовара/, тогда постепенно мы бы полностью ушли от вложенности товаров в /catalog/;
3. вложенность в фабрику /manufacturer/erba/названиетовара/, аналогично постепенно все товары уйдут из каталога в фабрики;
4. вложенность предметов в папку каталог /catalog/divany/названиетовара/, но тогда нам пришлось бы делать редиректы с /catalog/divany/ на /divany/, так как сами предметы не завязаны на папке каталог;
5. указание фабрики в структуре — /catalog/erba/названиетовара/, но тогда нам опять придется делать редирект с /catalog/erba/ на /manufacturer/erba/, так как фабрики тоже принадлежать не каталогу, а папке /мануфактура/.

Чтобы ЧПУ был гарантированно уникальный, артикул оставляем обязательно: каталог достаточно большой, и мы точно знаем, что названия товаров разных фабрик могут совпадать.

Название товара все пишут как хотят или по ограничениям CMS. Мы предпочтение отдали варианту, который используется у большинства ритейлеров, например https://www.mvideo.ru/products/smart-chasy-huawei-watch-fit-black-tia-b09-30050951 или https://www.tsum.ru/product/5457027-kashemirovyi-pulover-bottega-veneta-chernyi/, то есть предмет + название товара + его артикул.

Здесь перед нами также стоял выбор из нескольких вариантов:

1. /kuhnya-unit-28781/, то есть предмет+название товара+артикул,
2. /cesar-unit-28781/, то есть название фабрики+названиетовара+артикул,
3. /kuhnya-cesar-unit-28781/, то есть предмет+название фабрики+названиетовара+атикул.

Мы выбрали первый вариант.

Критерий успешного переезда на новые адреса — это быстрый переход с одного написания урла на другой без массового вылетания страниц в 404 с сохранением или удержанием позиций раздела, в котором произошла смена урлов товаров.

Незадолго до переезда на ЧПУ для сайта lacasa-m.ru, у нас был опыт с другим клиентом, у которого потребовалось поставить большое количество редиректов. И в том кейсе мы наблюдали проблемы индексирования массовой смены адресов редиректами — поисковые боты не справлялись с оперативным индексированием: появились дубли в индексе, когда старый товар еще не успел уйти из индекса, а новый адрес для этого же товара уже проиндексировался.

Поэтому мы приняли решение не делать редиректы сразу на все товары, а сделать переход на новые урлы постепенно в два параллельных потока:

1. Выбрать не самые крупные и приоритетные разделы и сделать переезд для них. Для старта мы выбрали двери и туалетные столики, а далее банкетки и кухни.
2. Все новые товары в каталоге и товары, которые клиент редактирует (пересохраняет), делать с ЧПУ.

Так мы планировали в случае проблем, заметить их на ранней стадии и либо приостановить переход на ЧПУ, либо применить другой подход.

Чтобы ЧПУ учитывались быстрее, мы принудительно отправляли старые адреса на переобход в вебмастере Яндекса через специальный функционал. Для чего: чтобы поисковый робот заходил на старые адреса, считывал ответ сервера 301 (редирект) на новый адрес, учитывал его и оставлял новый адрес товара с ЧПУ вместо старого в своей базе. При этом все же появлялось дублирование товаров по двум разным адресам: староe и новоe с ЧПУ. Чтобы свести этот момент к минимуму, мы раз в 2 недели делали выгрузки дублей товаров из вебмастера и заново отправляли старые адреса на переобход, чтобы при втором или даже третьем переобходе 301 редирект все же учитывался. Такая работа давала результаты, так как показатель дублирования был небольшой — держался на уровне 1-3%, что относительно общего количества проиндексированных страниц незначительно. Также в выгрузках дублей мы видели, что списки могли совпадать с предыдущей выгрузкой, но незначительно, т.е часть старых урлов уходила из дублирования после переобхода, но появлялись новые, ведь поисковый робот учитывал новые ЧПУ постепенно.

Первые ЧПУ мы выкатили 13.04.2021, второй блок 14.07.2021, через 5 месяцев мы имели следующие цифры по проиндексированным товарам:

• Количество товаров в каталоге — 26569
• Количество проиндексированных товаров, где навесили ЧПУ — 9696
• Количество проиндексированных товаров без ЧПУ — 16953

Видно, что сумма ЧПУ и без ЧПУ адресов примерно равна реальному количеству товаров с небольшим количеством дублей:

11.10.2021 было решено, что надо выкатить новые адреса сразу на все оставшиеся товары. Спустя месяц Вебмастер сообщал, что 50% страниц имеют дубли.

Спустя почти 2 месяца количество проиндексированных страниц снизилось и на середину декабря их стало порядка 33000 страниц — Яндексу потребовалось 2 месяца, чтобы проиндексировать новые страницы и выкинуть дубли.

В отличии от Яндекса, Google шустрее индексировал новые урлы и выкидывал старые, если видел 301 редирект. Поэтому дублей в Google оказалось значительно меньше во время перехода на ЧПУ.

После проделанной работы мы тщательно проанализировали страницы входа в каталог и позиции товарных запросов за разные периоды и сделали следующие выводы:

• При плавном переходе на новые урлы с ЧПУ и с правильной настройкой редиректов, мы сохранили практически тот же объем страниц в индексе и избежали дублирования.
• После выкатывания ЧПУ для остальной части страниц (где-то 3/4 всех товаров), ничего критичного не случилось: поисковые системы проиндексировали новые урлы и произошло некоторое дублирование. Но даже при максимальном количестве дублей никаких падений по сайту из поиска не было. Дублирование за пару месяцев снизилось с 53% до 17%. Сайт хороший, часто обновляемый, поэтому чаще обходится поисковыми системами и все 301 редиректы учитываются в разумные сроки. Делаем вывод, что не стоит боятся выкатывать ЧПУ сразу на все желаемые страницы на хорошем большом сайте, при корректной настройке редиректов.
• При индексировании для ПС не увидели предпочтений: если есть новый урл с ЧПУ — он заходит в индекс, если нет, старый урл висит в индексе.
• Визуально новые адреса с ЧПУ в сниппете Яндекса стали привлекательнее и понятнее для человека: