Как определить дубли страниц сайта

В последнее время очень часто нам в продвижение дают сайты у которых огромное количество дублей страниц. Конечно современные cms к примеру joomla и все производители расширений для нее стараются максимально оптимизировать все, что бы избавиться от дублей страниц, но при этом их все ровно на любом движке может быть очень много. Во многих случаях дубли страниц плодит сам администратор сайта создавая кучу одинаковых пунктов меню с одинаковым содержимым. В данной статье мы не будем писать как полностью убрать все дубли страниц сайта так как для каждого движка есть своя технология, а так же при установке каждого модуля, расширения, плагина могут опять появляться дубли и расписать все для каждого движка и всех возможных для него расширений нереально. 

 Как определить дубли страниц сайта

В первую очередь после создания сайта Вам необходимо воспользоваться поисковыми системами и почитать по устранение дублей страниц непосредственно для Вашего движка и его версии. Но прошу Вас будьте аккуратнее и не стремитесь выполнять сразу же все предписания которые Вам предлагают на разных сайтах разные авторы, прежде чем решили, что то сделать обязательно сделайте резервную копию сайта и базы данных и прежде чем вносить изменения в скрипты или настройки сайта обязательно проверяйте, что Вам советуют так как возможно Вам делать этого и не нужно. Пример: вам советуют через .htaccess убрать дубль страниц с index.php что бы всегда была только прямая ссылка на сайт и его страницы. Проверьте прежде чем это делать так как возможно Вам это не нужно и производитель движка уже продумал все за Вас. Так же на многих движках все это включается настройками в админке. Еще пример: вам советуют убрать дубли страниц материалов сайта. прежде чем это делать проверьте код страницы так как возможно на всех дублях указан rel="canonical" и стоит ссылка указывающая на оригинал страницы. Данный тег дает поисковым системам понять, что эта страница дубль и ее не нужно индексировать. 

Если Вы будете выполнять все, что Вам советуют то Вы просто перегрузите сайт лишними редиректами и процессами, что замедлит его работу, а так же далеко не положительно отразится на его позициях в поиске. Самое главное прежде чем выполнять какие то советы проверяйте все на предмет есть ли у Вас такой дубль или нет.

Самый распространенный вариант ошибки когда cms позволяет делать большое количество меню на сайте (верхнее, боковое, нижнее и т.п.) для удобства пользователей и многие новички начинают применять большое количество таких меню для удобства пользователя, что бы ему каждый раз не возвращаться в шапку сайта для навигации, а просто переключаться в боковом меню. При создании таких дополнительных меню к примеру в шапке администратор создает пункт меню на главную страницу блога и делает ей алиас blog-page и далее создает еще боковое меню и выбирает опять же пункт меню главную страницу блога и вписывает ей такой же алиас, соответственно при сохранении движок уведомляет, что такой алиас уже есть в системе и предлагает создать другой и администратор вписывает алиас просто blog. Вот администратор сам лично создал дубли страницы на своем сайте. Если Вам нужны дополнительные меню для пользователей то обращайте внимание если такой пункт уже есть в каком либо другом меню то создавайте не пункт меню, а псевдоним пункта меню который ссылается на уже существующий или просто ссылкой. Данный пример характерен для сайтов на joomla, но так же не однократно встречал и на других движках.

Далее когда Вы просмотрели весь сайт и прочитали кучу советов по поиску и устранению дублей для Вашего движка и выполнили множество рекомендаций Вам необходимо проверить открытость нужных Вам страниц сайта, картинок и т.п. на доступность к индексации. Делает это на всякий случай, что бы точно убедиться, что Вы не перекрыли ни чего лишнего. Пример: был один сайт у которого не индексировались картинки так как пользователь сам лично закрыл их через robots.txt, а на хорошем сайте даже картинки могут приносить большое число посещений. Конечно в данный момент куча онлайн сервисов которые помогают выявить дубли страниц, а так же есть программы, но вполне достаточно читать статьи и выполнять рекомендации людей которые уже наступали на грабли чем наступать на них самому, а программы и онлайн сервисы имею общую направленность и не дадут Вам полностью понять всю суть именно для Вашего движка. 

После выполнения всех манипуляций Вам необходимо ждать индексации сайта и после индексации смотреть выдачу в поисковых системах. Выдачу смотреть обязательно в google и yandex так как она у них абсолютно разная. В выдаче изучайте проиндексированные страницы сайта на предмет дублей. Вы сами должны знать свой сайт и если Вы знаете, что страница Вашего сайта идет сайт/категория/статья а тут в поиске Вы видите сайт/категория/непонятно_что/статья или сайт/статья то изучайте и смотрите где Вы совершили ошибку и Ваша статья доступна для индексации по нескольким адресам, а так же гуглите как устранить такую ошибку именно для Вашего движка. Так же обращайте внимание именно на ссылку которая должна вести на статью и если Вы видите, что статья есть в поиске, но на нее ведет другая ссылка, то после устранения ошибки через .htaccess сделайте перенаправление и ошибочной ссылки на нужную, что бы статья не просто пропала из поиска, а поисковой робот проиндексировал ее по новому адресу.

Так же обращайте внимание на страницы поиска или страницы без текста такие как профиль пользователя и т.п., данные страницы не несут в себе информации и по этому будут отрицательно влиять на Ваш сайт и его продвижение.

Таким образом Вы сами оптимизируете свой сайт. Конечно не обойдется без шишек и ошибок, но за то Вы сами сможете понять как убрать дубли страниц на своем сайте. Если Вам лень мучится и для Вас проще заплатить и сделать все быстро - то это ваше право.

Так же можете пройти в раздел нашего сайта "Продвижение сайтов" где Вы сможете найти для себя много тарифов по продвижению и оптимизации сайта.