Про RecomindoBot
RecomindoBot — це краулер Recomindo, сервісу, який показує, чи рекомендують бізнес ШІ-асистенти, як-от ChatGPT і Perplexity. Він читає невелику кількість публічних сторінок одного сайту, щоб провести аудит на чийсь запит.
Чому він зайшов на ваш сайт?
Хтось ввів ваш домен у Recomindo: під час безкоштовної перевірки чи безкоштовного інструмента, клієнт, який налаштовує бізнес для відстеження, або агенція, що готує звіт. Сайти зареєстрованих клієнтів також час від часу перечитуються, щоб аудит лишався актуальним. RecomindoBot не блукає мережею і не переходить за посиланнями на інші сайти.
Що він завантажує?
- Спочатку ваш /robots.txt. Якщо він забороняє RecomindoBot, ми зупиняємося і нічого більше не читаємо.
- Вашу головну сторінку, а також /llms.txt і XML-мапу сайту, якщо вони є.
- Кілька ключових публічних сторінок того самого сайту (про компанію, послуги, ціни, FAQ, контакти): щонайбільше 10 сторінок і щонайбільше 20 запитів загалом.
- Лише сторінки, які дозволяє ваш robots.txt, і щонайбільше 4 запити одночасно. Якщо головна сторінка відповідає кодом 401, 403, 429 або 503, ми одразу зупиняємося й не повторюємо спроб.
- Більше нічого: без входу в акаунти, без форм, без виконання JavaScript, без зображень і файлів та без інших сайтів. Сторінки читаються як текст, до 2 МБ кожна, через стандартні вебпорти.
Що відбувається з прочитаним?
Текст аналізується, щоб скласти аудит, наприклад чи можуть ШІ-роботи читати ваш сайт і чи є в нього llms.txt, структуровані дані та FAQ. Як ми поводимося з даними, описано в нашій політиці конфіденційності. Політика конфіденційності
Як його впізнати
Кожен запит містить такий заголовок User-Agent:
RecomindoBot/0.1 (+https://recomindo.com/bot; AI visibility audit)Як заблокувати або обмежити його?
Додайте це до вашого robots.txt. RecomindoBot читає robots.txt перед кожним аудитом. Щоб заблокувати лише частину сайту, замініть / на потрібний шлях.
User-agent: RecomindoBot
Disallow: /Це впливає лише на аудити Recomindo. Те, що можуть читати ChatGPT, Perplexity чи Google, не зміниться, бо вони використовують власних роботів.
Контакти
Якщо RecomindoBot спричинив проблему або у вас є запитання, напишіть нам, вказавши свій домен і час запиту:
[FILL IN: contact email]