Спершу з’ясуйте, що саме маєте на увазі: видиму для людей сторінку sitemap чи XML-файл sitemap
Перший крок — розділити дві різні речі: сторінку sitemap для людей і XML sitemap для пошукових систем. Видима для користувачів сторінка sitemap зазвичай є звичайною вебсторінкою з посиланнями, згрупованими за темами, розділами або відділами. XML sitemap — це файл, який читають машини; його часто не видно звичайним відвідувачам, і він може лежати за адресою на кшталт /sitemap.xml.
Ця різниця важлива, бо завдання пошуку змінюється. Якщо ви питаєте, як перевірити, чи є на сайті сторінка sitemap, то, можливо, шукаєте сторінку, яку може відкрити відвідувач, а не файл для пошукових роботів. Тож коли постає питання, як перевірити чи є на сайті sitemap, спершу визначте, чи йдеться про видиму сторінку, чи про XML-файл. Файл може існувати навіть тоді, коли видимої сторінки sitemap немає, і навпаки — таке теж буває на невеликих редакційних сайтах.
Один швидкий орієнтир — назва сторінки. Якщо на сайті є “Sitemap”, “Site Map” або “All Pages”, найімовірніше, це сторінка для людей. Якщо браузер показує XML-теги або простий список URL-адрес, це XML sitemap. Просто. Не плутайте їх.
Перевірте футер сайту, центр допомоги та посилання accessibility або “site map”
Почніть із футера на десктопі та мобільному, бо багато сайтів розміщують там посилання на sitemap поруч із About, Privacy або Contact. Велике видання також може сховати його в центрі допомоги, на сторінці доступності або в блоці корпоративних ресурсів. Такі місця часто трапляються на сайтах із сотнями сторінок, де видима сторінка sitemap допомагає відвідувачам зорієнтуватися, тож саме тут часто можна де знайти sitemap сайту без зайвих пошуків.
Шукайте не лише точну позначку “sitemap”. Деякі сайти використовують “Site Map”, “Site index” або позначку для доступності на кшталт “page map”. Це особливо важливо для державних, університетських та корпоративних сайтів, де команди з доступності часто вимагають сторінку, що акуратно перелічує основні розділи. Сайт із 20 сторінками може обійтися без неї; сайт із 2 000 сторінок — зазвичай ні.
Не покладайтеся лише на верхнє меню. Посилання у футері може бути єдиною публічною підказкою. Якщо на сайті є центр допомоги, спершу шукайте “site map” саме в цьому розділі, а вже потім по всьому сайту. Один клік може заощадити десять хвилин.
Спробуйте найімовірніші шаблони URL для сторінки sitemap
Якщо футер нічого не дав, перевірте ймовірні шаблони адрес у рядку браузера. Почніть із /sitemap, потім /site-map, потім /sitemap-page. Багато сайтів також використовують /pages/sitemap або /info/sitemap. Назви не стандартизовані, тому короткий список кращий за хаотичне вгадування.
Перевіряйте по одному шаблону та дивіться на результат. Хороша сторінка sitemap часто відкриває чисту HTML-сторінку із групами посилань, тоді як відсутня сторінка може вести на 404 або перенаправляти вас в інше місце. Якщо сайт англомовний і має широку інформаційну архітектуру, першим варто спробувати /sitemap. Якщо ж він використовує фірмовий стиль оформлення, інколи з’являється /site-map.
Невелике застереження: не припускайте, що URL є публічним лише тому, що він виглядає логічно. Деякі сайти блокують прямий доступ або резервують цей шлях для співробітників. Якщо браузер повертає фірмову сторінку помилки, це теж корисна інформація. Вона означає, що сайт про це місце думав, навіть якщо не відкриває його для всіх.
Для великих контентних сайтів сторінка sitemap може також лежати під шляхом розділу, наприклад /help/sitemap або /about/site-map. Це особливо часто трапляється, коли сайт хоче розмістити цю сторінку поруч із довідковими матеріалами, а не в основному публічному шарі. Спробуйте те, що вже бачите в структурі сайту.
Знайдіть згадки про sitemap у файлі robots.txt
Відкрийте /robots.txt і пошукайте рядок, що починається з Sitemap:. Такий рядок часто вказує на XML-файл sitemap, а інколи — на кілька файлів. Сайт може приховувати видиму для людей сторінку sitemap, але при цьому вказувати XML sitemap у robots.txt, і це сильний сигнал, що sitemap у тій чи іншій формі все ж існує.
Ця перевірка швидка. Введіть домен сайту, а потім /robots.txt, після чого прочитайте звичайний текст. Якщо бачите Sitemap: https://example.com/sitemap.xml, у вас є доказ XML sitemap, навіть якщо публічне посилання на сторінку не знайдено. Якщо записів Sitemap кілька, сайт може ділити sitemap за розділами, мовами або типами контенту.
Не зупиняйтеся на першому файлі. Деякі сайти вказують не один sitemap, а файл-індекс sitemap. Він, своєю чергою, може вести до кількох XML sitemap. Корисно, так. Видиме для відвідувачів — не завжди.
Якщо вам потрібна саме сторінка для людей, robots.txt не підтвердить це напряму. Він підтверджує XML-частину. Проте це все одно підказка, а підказки важливі, коли навігація на сайті перевантажена або дивно організована. Для пов’язаних перевірок структури сайту гайд про те, як перевірити, чи є на сайті сторінка для преси показує ту саму звичку: спершу йти слідом, який уже видно.
Шукайте “sitemap” у навігації сайту, внутрішньому пошуку або вихідному коді сторінки
Скористайтеся власним пошуком сайту, якщо він є, і введіть “sitemap” напряму. Це звучить надто просто, але на сайтах із великими архівами або багатомовними меню це працює. Якщо видимого поля пошуку немає, спробуйте пошук по сторінці в браузері після відкриття головної сторінки, а потім футера, а потім сторінки розділу. Три місця. Три шанси.
Внутрішній пошук може показати приховані заголовки сторінок, а не лише активні посилання. Результат із назвою “Sitemap”, “Site map” або “Accessibility sitemap” може з’явитися навіть тоді, коли головне меню мовчить. На деяких контентних сайтах сторінка sitemap існує лише як сторінка, яку можна знайти пошуком, бо редакційна команда не хотіла виносити її в основну навігацію.
Якщо пошук не допоміг, перевірте вихідний код сторінки. У HTML-джерелі пошукайте слово “sitemap” у тексті посилань, атрибутах даних або закоментованому коді. Іноді розробник залишив посилання в розмітці, але не показав його на екрані. Це не дуже елегантно, але так буває. І не раз.
Ось тут повторення працює на вас. Перевірте шапку, футер, мобільне меню та вихідний код. Чотири місця, одне слово. Якщо на сайті є сторінка sitemap, хоча б один слід слова “sitemap” часто випливає десь у цьому наборі. Приховане посилання все одно залишається посиланням.
Перевірте, чи не зроблено sitemap як динамічну або JS-рендерену сторінку
Деякі сайти будують сторінку sitemap за допомогою JavaScript, тож вона з’являється лише після виконання скриптів. Під час простого обходу посилань така сторінка може виглядати відсутньою, хоча в браузері вона є. Таке трапляється на сайтах, схожих на застосунки, на маркетингових платформах і на сайтах, що підтягують навігацію через API.
Щоб це не пропустити, відкрийте ймовірну адресу sitemap і зачекайте, доки сторінка повністю завантажиться. Якщо браузер показує індикатор завантаження, порожній контейнер або список посилань із затримкою, можливо, ви дивитеся на JS-рендерену сторінку sitemap. Якщо ваші інструменти дозволяють, перевіряйте окремо вихідний код і вже відрендерене DOM-дерево. Скрипт може створити сторінку, яка спершу здається порожньою.
Ще одна підказка — це маршрут, а не файл. Сайт може використовувати /sitemap як фронтенд-маршрут, тоді як сервер спершу віддає оболонку застосунку. Сторінка все одно реальна, але вміст приходить пізніше. Саме тому фраза sitemap xml і сторінка sitemap як перевірити має сенс не лише в теорії, а й на практиці, коли ви перевіряєте односторінковий застосунок із клієнтською маршрутизацією.
Для відвідувачів це може бути заплутано. Для редакторів — ще гірше: сторінка існує, але лише після завершення роботи скриптів. Якщо сайт блокує скрипти або ваш інструмент їх не виконує, ви можете її не побачити. Не поспішайте оголошувати її відсутньою.
Переконайтеся, що це справді sitemap, а не схожий індекс або сторінка каталогу
Сторінка з назвою “Sitemap” не завжди є справжньою сторінкою sitemap. Подивіться, що саме вона містить. Справжня сторінка sitemap зазвичай перелічує основні розділи, групи матеріалів або цільові сторінки у структурованому вигляді. Натомість блоговий архів сортується за датою. Індекс категорій сортується за темами. Сторінка каталогу часто є алфавітним списком і майже не містить пояснень.
Скористайтеся простою перевіркою з 4 пунктів. По-перше, подивіться, чи групує сторінка посилання за назвами розділів. По-друге, перевірте, чи охоплює вона широкий зріз сайту, а не лише одну категорію. По-третє, подивіться, чи є там службові сторінки на кшталт About, Contact або Policies. По-четверте, переконайтеся, що сторінка публічна й створена для читачів, а не лише для ботів. Чотири перевірки, не одна.
Також стежте за URL і хлібними крихтами. Сторінка під /blog/ або /category/ може бути архівом, навіть якщо в заголовку написано “sitemap”. Сторінка під /sitemap або /site-map виглядає перспективніше, але рішення все одно за змістом. Заголовки можуть брехати. Структура зазвичай говорить правду.
Якщо сторінка виглядає як каталог із довгим рядом файлів, це вже зовсім інша річ. Сторінка каталогу може перелічувати папки або завантаження, а не розділи сайту. Для користувача різниця очевидна за кілька секунд. Для того, хто перевіряє, це необхідне розрізнення.
Що робити, якщо сторінки sitemap немає
Якщо ви не знайшли публічної сторінки sitemap, переходьте до XML sitemap, пошуку по сайту або перевірки через краулер. XML sitemap — найшвидший запасний варіант, бо часто зібраний в одному місці та містить важливі URL сайту. Якщо robots.txt веде до кількох XML-файлів, почніть із файлу-індексу та рухайтеся далі.
Наступний варіант — пошук по сайту. Шукайте широкі терміни на кшталт “about”, “blog”, “help” або відомий розділ і дивіться, як сайт організовує результати. Сторінка результатів пошуку може розповісти про структуру сайту більше, ніж будь-яка відсутня сторінка sitemap. Вона також може показати сторінки, які не пов’язані з футером.
Якщо вам потрібна повніша карта, проскануйте сайт браузерним інструментом або локальним краулером і зберіть внутрішні посилання з доступних сторінок. Це дасть практичний перелік навіть без публічної сторінки sitemap. На сайті з обмеженою навігацією такий обхід може бути єдиним надійним шляхом.
Також можна зіставити це завдання з іншими перевірками сайту, наприклад із гайдом про те, як перевірити, чи є на сайті онлайн-чат підтримки або гайдом про те, як перевірити, чи є на сайті сторінка з годинами роботи, бо кожен із них починається з тієї самої звички: спершу знайти очевидне місце, а потім перевірити прихований шлях, якщо очевидне місце не спрацювало.
І якщо сайт невеликий, не дивуйтеся, коли сторінки sitemap взагалі немає. Невеликий сайт-буклет із п’ятьма сторінками може покладатися лише на головне меню. Архів із 500 сторінками — зазвичай ні. Саме ця різниця більше за будь-яке окреме вгадування URL визначає пошук.
