Звіт “Near Duplicates” у програмі Screaming Frog дозволяє побачити, який відсоток контенту є дубльованим.
Це допомагає знайти дубльовані сторінки в великому обсязі:
При аналізі сайту перевірка на дубльований контент може бути складною і трудомісткою.
Часто, якщо у сторінки є конкуруючий дубль, це може бути не одразу помітно при візуальній перевірці.
Такі речі, як PDF-файли, варіації URL та інші типи дубльованого контенту, часто приховані глибоко всередині сайту.
На щастя, ви можете перевірити це в великому обсязі, використовуючи наступний процес:
- Відкрийте
Screaming Frog. - Перейдіть в Configuration > Content > Duplicates.
- Позначте “Enable Near Duplicates” і виберіть Similarity Threshold.
- Запустіть краулінг і дочекайтеся його завершення.
- Коли краулінг завершиться, перейдіть в Crawl Analysis > Configure. Переконайтеся, що “Content” позначений.
- Перейдіть в Crawl Analysis > Start.
- Коли аналіз буде завершено, перейдіть в Content > Near Duplicates. “Найближчий зразок схожості” покаже вам відсоток збігу.
- Ви можете використовувати вкладку “Duplicate Details”, щоб побачити інші сторінки, які мають високий відсоток збігу.
Цей процес значно прискорює ідентифікацію дубльованого контенту на вашому сайті та групування URL, які пошукові системи вважатимуть схожими.