Очищення списку URL: видалення UTM-міток і дублікатів
Списки посилань з різних інструментів рідко збігаються: та сама сторінка трапляється з мітками відстеження, зі скісною рискою в кінці й без неї, через http і https. Очистьте список один раз, перш ніж перевіряти чи надсилати його.
Ваші дані залишаються у браузері. Нічого не передається на сервер і не зберігається.
Основні факти
- URL з параметрами відстеження, як-от utm_source, — це інша адреса, ніж та сама URL без них.
- http і https, www і без www, а також кінцева скісна риска — кожен такий варіант — окрема URL-адреса.
- Частина URL після # (фрагмент) не надсилається на сервер.
- Google сканує URL з файлу sitemap саме в тому вигляді, в якому їх указано, тому в чистому списку варто використовувати канонічну форму.
Завантажте чек-лист «Діагностика проблем з індексацією»
Покрокова перевірка: статус у Search Console, доступність сторінки, robots.txt, noindex, канонічна URL-адреса, переспрямування, файл Sitemap і зворотні посилання — і що робити в кожному випадку.
Завантажити PDF PDF · сторінок: 3Як користуватися
- Вставте посилання або виберіть файл (TXT, CSV чи будь-який текстовий експорт).
- Налаштуйте обробку: параметри відстеження, фрагменти, https, кінцева скісна риска та, за потреби, єдиний домен, який слід залишити.
- Натисніть Очистити список.
- Перевірте лічильники й таблицю за доменами.
- Скопіюйте результат або завантажте його як TXT чи CSV.
Де взяти дані
Інструменти для аналізу беклінків
Експорти з Ahrefs, Semrush, Majestic чи подібних інструментів. Інструмент знаходить у файлі кожну адресу http(s), хоч би які там були стовпці.
Search Console
Експорти зі звітів Links, Page indexing або Performance.
Ваші власні нотатки
Списки з таблиць, чатів чи документів. Рядки без протоколу, як-от example.com/page, читаються як https.
Навіщо очищати список перед перевіркою чи індексацією
Дублікати й варіанти з мітками відстеження роблять список довшим, не додаючи сторінок. Коли ту саму сторінку перевіряють чи надсилають під трьома адресами, це забирає час і бюджет, а результати стають заплутаними.
Як вибрати варіант для кінцевої скісної риски
Виберіть ту форму, яку ваш сайт використовує в канонічних URL. Варіант «Додавати» пропускає URL, що закінчуються назвою файлу, як-от .pdf або .html. Якщо не впевнені, залиште скісні риски як є.
Чого інструмент не змінює
Шляхи та значення параметрів зберігають регістр, бо шляхи можуть бути чутливими до регістру. Параметри, що не стосуються відстеження, залишаються, якщо ви не вирішите прибрати їх усі.
Наступний крок
Коли чистий список готовий, можна одним махом перевірити, які з цих URL проіндексовані.
Запитання й відповіді
Які параметри вважаються параметрами відстеження?
Параметри utm_*, gclid, gclsrc, dclid, gbraid, wbraid, fbclid, msclkid, yclid, mc_cid, mc_eid, _ga, _gl, igshid і ref_src.
Чи перевіряє інструмент, що URL працюють?
Ні. Він лише очищає текст списку. Для кодів відповіді й статусу індексації потрібен краулер або інструмент перевірки індексації.
Який обсяг списку можна обробити?
Інструмент працює у вашому браузері, тож межа — пам’ять вашого пристрою. Списки з десятків тисяч рядків на звичайному комп’ютері обробляються без проблем.
Чи можна залишити лише один сайт?
Так. Введіть домен у поле «Залишити лише цей домен»; його піддомени теж залишаться.
Джерела
- Build and submit a sitemap — Google Search Central: https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap
- RFC 3986: Uniform Resource Identifier (URI) syntax: https://www.rfc-editor.org/rfc/rfc3986