Золотые правила удаления дубликатов страниц с помощью NoIndex или Canonical
Дублирование страниц плохо влияет на SEO (поисковая оптимизация). Они снижают рейтинг вашей страницы. Дубликаты страниц имеют похожее или даже идентичное содержимое. Например, разные стили, HTTP или HTTPS, www или без www и т. д. Эти страницы обычно содержат один и тот же контент, и вы должны убедиться, что поисковые системы индексируют только 1 копию для всех похожих страниц.
Обеспечьте редирект 301
Перенаправление 301 сообщает поисковым системам, что эта страница постоянно перенаправляется на новую страницу, и оценка страницы также должна быть перенесена на нее. Это полезно, когда вы переходите на новый домен, начинаете использовать версию HTTPS или решаете использовать URL-адреса с www или без www. Помните, что поисковые системы рассматривают HTTP и HTTPS как две разные копии, если вы не запретите им этого делать. Поисковые системы, хранящие повторяющееся содержимое, плохи, потому что оценки также будут разделены между этими страницами. Для перенаправления 301 целевой URL-адрес будет отображаться в браузере, поэтому вам просто нужно сохранить копию версии. Следовательно, это не подходит, если вы хотите иметь несколько версий, доступных, например, www и корневые домены, версии HTTP или HTTPS.
Ненужный индексный тег
По умолчанию боты поисковых систем работают по принципу:
Это означает, что боты будут индексировать страницу и переходить по всем найденным на ней ссылкам. Если вы не меняете поведение по умолчанию, не нужно помещать это правило в тег head.
Без индекса, но следуйте
Это почти правда, что вы должны сделать noindex, но следовать, если вы не хотите, чтобы подобная страница была проиндексирована. Когда страница удаляется из индексов поисковых систем, другие метаданные могут быть проигнорированы/исключены, например, тег: ключевое слово и описание.
SEO-улучшения
Метатег NoIndex поддерживается большинством поисковых роботов, например GoogleBot, Yahoo Bot. Это хорошее место для использования NoIndex на дублирующихся страницах, которые отличаются только стилями (например, версия для мобильных устройств или версия для ПК). Вы также можете использовать их на страницах с низкой ценностью, таких как индексные страницы форума.
Канонический
Вы можете указать следующий синтаксис, чтобы указать поисковым системам исходный/подлинный URL:
Помните, что это только подсказка, и поисковая система все еще может проиндексировать страницу. Тег Canonical может поддерживаться не всеми поисковыми ботами, поэтому не полагайтесь на них. Таким образом, использование Canonical и NoIndex служит противоположной цели. Канонический намекает, что эта страница не должна быть проиндексирована, если целевой URL не является самим собой (самоканоническим). NoIndex явно указывает не индексировать текущую страницу. Поэтому вам просто нужно выбрать один и не отправлять смешанный сигнал, который может вызвать проблемы, если целевой канонический URL-адрес имеет значение NoIndex.
Если страница имеет Canonical и NoIndex, некоторые поисковые системы могут не индексировать целевой Canonical URL, даже если он должен быть проиндексирован, потому что поисковые системы могут подумать, что две страницы должны быть эквивалентны. Это зависит от того, как поисковые системы интерпретируют ключевое слово Canonical.
Итак, вот правило:
На проиндексированных страницах используйте ключевое слово Canonical. На неиндексированных страницах используйте NoIndex. Нажмите, чтобы твитнуть