Як прибрати дублі сторінок сайту

Навіть якщо на вашому сайті є декілька дублікатів сторінок, їх необхідно прибрати в терміновому порядку. Справа в тому, що якщо пошукові роботи виявлять сторінки, які повторюються на сайті, вони можуть знизити рейтинг і сайт опуститься в пошукових видачах, що вкрай небажано. Тому, щоб портал був успішним, потрібно періодично перевіряти та за необхідності видаляти дублі.

Яку шкоду завдають дублі сторінок

Іноді веб-майстри-початківці не надають значення повторюваним сторінкам, і це груба помилка. Якщо не займатися вирішенням цього питання, можуть виникнути серйозні проблеми з просуванням сайту. Дублікати сторінок можуть завдати такої шкоди:

• Загальна унікальність сайту буде значно знижена.
• Дублі сторінок, як правило, мають однакові мета-теги, що також негативно впливає на ранжування.
• Пошуковим роботам складно визначити, яка сторінка є дублікатом, а яка першотвором, і не знають яку з них відображати.

Як бачимо, сторінки, що повторюються на сайті, можуть негативно впливати на його розвиток і просування у пошуковій видачі.

З чого почати

Перш ніж розпочати видалення сторінок, необхідно виявити причину їхньої появи. Найчастіше ця проблема відбувається з таких причин:

• неправильні установки пошукових фільтрів на сайті;
• припущено помилок під час створення структури сайту.

Сучасні «рушії» іноді припускаються подібних помилок. Вони можуть помилково згенерувати копії сторінок і зберігати їх під різними іменами. Як бачимо, причин появи дублів сторінок може бути декілька, але у будь-якому разі проблему необхідно вирішувати.

Читайте також: Що таке ключові слова.

Вплив дублікатів на позицію сайту

Якщо на вашому веб-ресурсі з’являться сторінки, що повторюються, це викликає істотні проблеми в просуванні. Коли пошуковий робот помітить, що на сайті є сторінки з однаковим контентом, він вважає їх не унікальними. Відповідно, це спричинить зниження позицій.

Загалом, унікальність сайту буде знижена. Коли пошукові системи проіндексують такі сторінки, одна з них вважатиметься не унікальною через однаковий контент. Сайт дуже довго індексується. Пошуковим роботам потрібно занадто багато часу, щоб проіндексувати велику кількість сторінок, у тому числі дублікатів.

Як вирішити виявлені проблеми

Після виявлення причин появи дублікатів сторінок їх потрібно видалити. Зробити це можна декількома способами, які ми розглянемо нижче.

Видалення вручну. Спосіб підходить якщо сайт має не більше 150 сторінок. Лише в такому випадку їх можна переглянути та зайві видалити самостійно.

За допомогою robots.txt. Таким способом ви не видалите сторінки, що дублюються, а просто приховаєте їх від пошукових роботів, щоб вони не змогли індексувати ці сторінки. Боти не можуть заходити на певні сторінки, якщо використовувати директиву Disallow. Якщо ви хочете заборонити роботу пошукової системи Яндекс індексувати будь-яку сторінку, вкажіть у robots.txt наступне: user-agent: Yandex Disallow: /stranitsa*

З використанням мета-тегу “noindex”. Такий метод також не може усунути дублі сторінок сайту, але може їх приховати від індексування. Спосіб схожий на попередній. Вам необхідно зайти до розділу Head і прописати в HTML-коді таке: < meta name=”robots” content =”noindex”.

За допомогою перенаправлення 410 можна повідомити пошукових роботів про те, що сторінка не існує. Необхідно у файлі конфігурування сервера .htaccess прописати Redirect410/tag/stranitsa69.html

Ще один спосіб, за допомогою якого не вдасться видалити дублі сторінки, але ви зможете вказати роботам шлях до вихідних сторінок. У коді HTML сторінок у розділі Head потрібно вказати: Якщо ви не можете видалити дублікати сторінок на сайті, необхідно убезпечити сторінки, пов’язані з дублікатами по внутрішньому перелінкуванню. Щоб вага не передавалася сторінкам, що повторюються, пропишіть у посиланнях наступне: <a href=http://100stranits/stranitsa69.html”rel=”nofollow”>Сторінка69</a >.

Читайте також: Найкращі способи просування блогу.

Тепер ви знаєте, як усунути дублікати сторінок на сайті. Рекомендується періодично перевіряти ресурс, щоб не допустити появи дублікатів сторінок. Це дозволить вчасно виявити проблему та вирішити її відповідно. У просуванні сайту важлива не лише внутрішня оптимізація, а й своєчасне виявлення всіх проблем. Вищеописані способи та рекомендації дозволять вам позбутися дублів.

FAQ: Як прибрати дублі сторінок сайту?