Содержание
- Что такое дубликаты? Как они появляются?
- Так в чем же дело?
- Что же считается дублем?
- Виды дубликатов
- Точные
- Неточные
- Как порождаются дубликаты
- Причины появления точных дублей
- Причины появления неточных дублей
- К чему приводит существование дублей
- Как бороться с дублированием?
- Способы поиска дублей
- Способы устранения дубликатов
Успешное продвижение онлайн-бизнеса зависит от множества факторов, в том числе от того, насколько привлекателен ваш сайт для поисковых систем. Дубли страниц – одна из решающих причин, влияющих на снижение эффективности и привлекательности вашего интернет-проекта, ведущих к падению его поискового рейтинга.
Что такое дубликаты? Как они появляются?
Вы добросовестно работали над своим детищем: подготовили уникальнейшее содержание, нашли и представили лучшую обучающую информацию, отработали графику, продумали организацию вебинаров, привлекли квалифицированных специалистов для их проведения… Словом, сделали все возможное для создания хорошего трафика и высоких дивидендов. Но результат оказался совсем не таким, как вы ожидали…
Так в чем же дело?
Поисковые системы – это программы, которые предпочитают качественные и оригинальные ресурсы. Именно таким сайтам они отдают приоритет, выводя на первые места повышением интернет-рейтинга. Высокое качество контента невозможно без высокой уникальности наполняющих ваш ресурс текстов. Что делает поисковик, когда «видит», что ваш драгоценный выношенный в муках творчества контент просто-напросто скопирован кем-то непорядочным? Правильно, он принимает текст за плагиат и жестоко «наказывает» подобное поведение понижением рейтинга нечестного на руку сайта.
То же самое иногда происходит и с теми, кто случайно или намеренно копирует и повторно публикует в интернете одну и ту же статью или текст. Зная подобное отношение поисковиков, любой владелец ресурса будет всеми силами стараться не допускать ничего подобного. И, когда они узнают, что причиной снижения их рейтинга были именно повторы, их удивлению нет предела: ведь они делали все возможное, чтобы исключить их!
Что же считается дублем?
Прежде всего это могут быть страницы с одинаковым (или почти одинаковым) содержанием, найденным поисковиком по разным, а иногда почти идентичным URL-адресам.
Если разница между адресами заключается только в незначимых для контента URI-параметрах, (например, в наличии или отсутствии www, .html, с .php или слеша), то поисковая система начинает принимать страницы с таким небрежным использованием идентификаторов за дубли.
Виды дубликатов
Повторы страниц, относящихся к одному сайту, называют внутренними. Внутренние дубликаты бывают точными двух видов:
Точные
URL-адреса кажутся разными, но информационное содержание – одинаково. Сравните, к примеру, следующее:
- http:// film.ru/about
- http://www.film.ru/
- http://www.film.ru/about.html
- https://www.film.ru/about/
Это классический пример точного дубля: страница, на самом деле, одна, отличаются только ее URL.
Неточные
К этому виду относятся страницы практически с одинаковым содержанием. К примеру, информация, представленная в блоке «О нас», почти как вторая капля воды похожа на текст, опубликованный на главной странице. Хотя меню будет содержать различные разделы и боковые колонки, вроде бы, даже разные URL-адреса, поисковая система определит их как дубликаты.
Как порождаются дубликаты
Если повторение содержания, а, следовательно, и появление неточных дубликатов контролировать легко, то намного труднее выявить у себя на сайте существование точного дубля.
Причины появления точных дублей
- Наличие ошибок в программной части ресурса при прописывании параметров страниц (например, различный порядок их следования). Следует ответственно отнестись к употреблению таких параметров как php, htm, html, www.
- Присваивание разных названий идентичным страницам, или создание условий, при которых получается многократное привязывание разных страниц ресурса к одному пункту меню.
- Неправильная постраничная пагинация, обуславливающая открытие первой страницы каталога или списка как через ссылку stranitsa/page_1, или через ссылку stranitsa.
- Смена дизайна сайта (так называемый редизайн), вызывающая изменение URL-адресов
Причины появления неточных дублей
Чтобы привлечь как можно больше целевой аудитории, владельцы сайтов сознательно повторяют на разных страницах часть уже упоминавшейся информации. Если это сделано в пределах разумного, такой подход может быть оправдан.
К чему приводит существование дублей
Негативное влияние дублированного контента на продвижение сайта очевидно. Игнорирование этой проблемы приводит к следующим последствиям:
- Наложение на ваш ресурс санкций и отправка их в фильтры. В результате, сильное снижение рейтинга или даже изъятие сайта из поисковых систем.
- Низкая релевантность ваших страниц, т. к. поисковик не может сориентироваться в одинаковых страницах, чтобы выбрать из них ту, которая заслуживает продвижения.
- Резкое снижение уникальности сайта ввиду распыления его содержания между дублями. Поисковая система начинает считать следующую страницу неуникальной по отношению к предыдущей, снижает ее рейтинг и ранжирование (т. е. ее место в поисковой выдаче).
- Потеря веса других страниц сайта – из-за его распределения между всеми составляющими.
- Увеличение времени обработки вашего сайта поисковиками, индексирующими дублированные страницы.
Как бороться с дублированием?
Исходя из вышесказанного, очевидно, что каждая страница вашего сайта должна содержать уникальную информацию и соответствовать только одной ссылке. В таком случае вы создадите идеальные условия для продвижения, а поисковые системы начнут адекватно их оценивать. Как же этого добиться? Вполне понятно, что сначала надо найти все дубли, а потом подумать над тем, как их уничтожить.
Способы поиска дублей
- Введите в поле поисковика доменное имя вашего ресурса. Сделайте пробел, введите туда же часть интересующего вас текста. Поисковая система тут же выдаст полный перечень всех страниц вашего сайта, содержащих эту фразу.
- Найти внутренние дубли вы можете также с помощью специальных программ, таких как Xenu. Xenu работает следующим образом: вы вводите свое доменное имя, программа ищет дубли ваших страниц, ошибки, неработающие ссылки, и составляет по ним для вас подробный отчет.
- Помимо этого, вы можете воспользоваться сервисами по анализу эффективности сайтов, которые предоставляются самими поисковиками. Они работают примерно по такому же принципу, описанному выше. В результате вы получаете отчет по дублям страниц, который можно расширить, к примеру, дополнительным списком ваших проблемных страниц.
Способы устранения дубликатов
После того, как вы получили подробный список дубликатов, вы можете заняться их устранением. Существует два способа устранения дублей: либо путем их искоренения, либо путем сокрытия их от поисковых программ.
Если основываться на принципе «одной странице – одну ссылку», то нужно оставить только один вариант для открывания необходимой страницы, и исключить все другие возможные вариации. При введении пользователем «не того» варианта откроется «ошибка 404», которую можно красиво оформить, а также снабдить небольшим количеством полезной информации о вашем сайте.
Некоторые считают, что такой способ несколько неудобен для пользования, поэтому налаживают «редирект», который автоматически перенаправляет другие варианты ввода на «нужную» страницу. Если быть точнее, такой прием называется Redirecting 301, и задать его можно на сервере с помощью специального файла htaccess. Поисковые системы относятся к редиректингу очень неплохо.
Второй способ заключается в том, что вы закрываете повторяющиеся страницы от индексации, производимой поисковиками. Осуществить подобное возможно, воспользовавшись специальным файлом robots.txt. Он прописывается как инструкция для поисковиков, применяемая ими при анализе информации, которую они должны проиндексировать или проигнорировать.
Это вполне оправданный прием, поскольку за вами – право на вашу интеллектуальную собственность, которую вы защищаете не бесконечными жалобами со скриншотами или доказательствами, отправленными администрациям Яндекс, Google и других поисковых систем, а путем устранения досадного недоразумения. Таким образом, вы обеспечиваете себе возможность окупить вложенные силы и средства, а также начать получать дивиденды от своего проекта.