Що таке robots.txt для зображень

Robots.txt для зображень керує доступом пошукових систем до графічних файлів на сайті. За допомогою цього файлу можна вказати, які зображення дозволено індексувати, а які — ні. За замовчуванням пошуковий бот сканує і HTML-сторінки, і медіафайли, якщо вони відкриті. Коли сайт містить велику кількість візуального контенту, контроль індексації стає частиною технічної оптимізації.

Файл robots.txt розміщується в кореневій директорії сайту та читається ботом до початку обходу. Якщо директиви обмежують доступ до зображень, бот їх не переглядає і не додає до Google Images. Якщо ж доступ відкритий — зображення можуть потрапити в індекс і з’явитися у візуальній видачі. Це впливає на трафік, видимість, навантаження на сервер і обсяг сканування. Заборона на індексацію зображень застосовується, коли вони не несуть цінності для пошуку або не мають поширюватися. Це також спосіб зменшити непотрібне використання crawl-бюджету й уникнути дубльованого контенту. Блокування графіки не заважає її відображенню на самому сайті — воно стосується лише поведінки пошукових ботів. Для сайтів, орієнтованих на контентне просування у Києві, налаштування robots.txt — не формальність, а контроль точки входу ботів у медіарозділи.

Коли використовується блокування зображень через robots.txt

Зображення завантажуються та індексуються за тими ж принципами, що й HTML-сторінки. Якщо файл доступний за прямим посиланням і дозволений у robots.txt, він буде проіндексований. Якщо заборонений — ні. Це стосується всіх форматів: .jpg, .png, .webp, .gif.

Блокування зображень застосовують у випадках, коли:

• фото взяті з платних стоків і не повинні поширюватися
• графіка дублюється на десятках сторінок
• візуальний контент не додає цінності в пошуковій видачі
• частина зображень належить до захищених або конфіденційних матеріалів
• медіафайли створюються автоматично (наприклад, неунікальні прев’ю)
• потрібно прискорити сканування інших розділів сайту

Закривати можна як окремі файли, так і цілі каталоги — це робиться за допомогою стандартної директиви Disallow.

Читайте також: Що таке краулінговий бюджет.

Приклади налаштувань robots.txt для зображень

Заборонити індексацію всіх зображень:

• User-agent: Googlebot-Image
• Disallow: /

Дозволити індексацію всіх зображень:

• User-agent: Googlebot-Image
• Allow: /

Заборонити індексацію певної папки:

• User-agent: Googlebot-Image
• Disallow: /uploads/

Заборонити індексацію за типом файлу:

• User-agent: *
• Disallow: /*.jpg$
• Disallow: /*.png$

Googlebot-Image отвечает только за Google Images. Для HTML-страниц с этими изображениями работают другие агенты.

Googlebot-Image відповідає лише за Google Images. Для HTML-сторінок з цими зображеннями працюють інші агенти.

Як впливає robots.txt для зображень на SEO

Якщо зображення індексуються, вони можуть з’являтися у візуальному пошуку. Унікальні та оптимізовані зображення з правильними ALT-тегами й назвами файлів дають додатковий трафік із пошуку по картинках. У e-commerce, блогах, кулінарних сайтах, туризмі, дизайні — це додаткове джерело переходів. В інших нішах воно може бути недоцільним.

Не потрібно індексувати зображення, якщо вони:

• стокові
• однакові для різних товарів
• не мають інформативної цінності
• дублюються між мовними версіями
• створюють навантаження на краулер

Для сторінок, де зображення — ключовий елемент контенту, індексація вигідна: галереї, портфоліо, лендінги з інфографікою, огляди.

Оптимізація зображень для індексації

Якщо зображення мають бути видимі в пошуку:

• використовуйте унікальні назви файлів
• додавайте ключові слова в ALT
• стискайте розмір без втрати якості
• завантажуйте зображення з власного сервера, а не через CDN
• створюйте логічні URL (наприклад, /images/seo-audit.png, а не /media/file123.png)
• уникайте JS-завантаження, яке бот не бачить

Медіаконтент повинен індексуватися лише тоді, коли він підсилює сторінку, дає користь і може бути знайденим за окремим запитом.

Типові помилки при налаштуванні robots.txt для зображень

Найпоширеніша помилка — повна заборона без аналізу. Масово блокують усі зображення, навіть ті, що приносять органічний трафік. Або навпаки — відкривають усе, включно з «сміттям».

Інші помилки:

• блокування всіх медіа через Disallow: /, без поділу типів
• використання застарілих директив
• невірно прописані маски (*, $)
• випадкове закриття важливих папок (наприклад, /img/)
• відсутність перевірки результату в пошуковій видачі чи GSC
• блокування зображень із зовнішніх джерел, вбудованих у сторінки

Також часто трапляється, що зображення відкриті, але не приносять користі: відсутні ALT, неінформативні назви, повільне завантаження.

Читайте також: Що таке index bloat і як його уникнути.

Як перевірити індексацію зображень

Запит у Google:

• site:домен.com filetype:jpg
• Якщо видає – зображення в індексі. Якщо порожньо — перевір robots.txt.

Якщо результати є — зображення індексуються. Якщо ні — перевірте robots.txt.

У Google Search Console можна перевірити, чи обхід Googlebot’ом шляху до зображення відбувається і чи бачить він файл. Перевірка URL дає інформацію про доступ, код відповіді та статус сканування. Додатково можна використовувати заголовок X-Robots-Tag: noindex — якщо потрібно керувати доступом до окремих файлів через бекенд, а не лише через robots.txt.

Коли наявність зображень в індексі — шкідлива

Зображення, які не мають цінності, масово дублюються або є технічними, збільшують індекс без користі. Це уповільнює оновлення важливих сторінок і знижує загальну видимість сайту. Особливо це актуально для інтернет-магазинів, де тисячі товарів мають одні й ті ж іконки або водяні знаки.

Шкідливо також, якщо:

• зображення з папки /admin/ потрапляють у пошук
• захищені банери використовуються конкурентами
• ілюстрації копіюються, і ви втрачаєте статус першоджерела

Захист починається з правильного robots.txt і обмеження доступу на серверному рівні.

Зв’язок налаштувань robots.txt і візуального контенту

Для сайтів, де зображення — частина стратегії просування, важливо не просто відкрити їх для індексації, а вписати у загальний план:

• оптимізовані ALT
• семантичні назви
• контент навколо зображення
• правильний формат (WebP — перевага)
• швидке завантаження
• структуровані дані, якщо доречно (товар, рецепт, стаття)

Якщо візуал не планується просувати — його слід закривати, видаляти з sitemap, не включати у внутрішню перелінковку. Це економить ресурси та спрощує SEO.

При замовленні SEO-послуг у Києві за вигідними цінами правильне налаштування robots.txt входить до базової перевірки. Це не окремий файл, а інструмент контролю індексації та навантаження.

Що зробити перед налаштуванням robots.txt для зображень:

• Визначити, чи потрібні зображення в пошуковій видачі
• Перевірити, що вже індексується
• Вирішити, які каталоги залишити відкритими, а які — закрити
• Налаштувати доступ через User-agent: Googlebot-Image
• Перевірити маски та виключення
• Оцінити вплив змін на швидкість і трафік
• Слідкувати за результатами у Google Search Console

Robots.txt для зображень — не формальність. Це фільтр. Він або допомагає, або заважає. Якщо сайт працює з медіа — налаштування обов’язкове. Якщо ні — варто закрити зайве і тримати індекс під контролем. Системне розуміння теми дає наш SEO-блог — обов’язково перегляньте.