SmartAuditBot
Хто такий SmartAuditBot, що він читає і як виключити свій домен.
Коротко
SmartAuditBot/1.0 — бот сервісу Smart Audit (SmartGT, ІТ-компанія, працює з 2012 року).
Він відкриває публічні сторінки сайту, щоб оцінити стан безпеки й пошукової видимості,
і показує власнику звіт. Перевірку запускає людина, яка ввела адресу сайту у формі на
audit.sgt.com.ua.
Як він поводиться
- Один запит на секунду, не більше двох одночасних з’єднань. Це помітно повільніше за будь-який пошуковий робот.
- Читає лише те, що віддає сервер публічно: HTML сторінок,
robots.txt,sitemap.xml, заголовки відповідей, сертифікат. - Нічого не змінює: жодних POST, жодних форм, жодних спроб входу.
- Не підбирає паролі й не шукає вразливості перебором. Перелік перевірених адрес фіксований, на кожну йде рівно один запит, і записується лише код відповіді.
- До 150 сторінок у безкоштовній перевірці.
- Виконує
robots.txt: заборонені розділи не відкриває,Crawl-delayдотримує.
Як виключити домен
Найшвидший спосіб — robots.txt на вашому сайті:
User-agent: SmartAuditBot
Disallow: /Бот перестане відкривати сторінки з наступної ж перевірки.
Якщо потрібно, щоб домен не можна було перевірити взагалі — навіть якщо адресу введе хтось сторонній, — напишіть нам на info@sgt.com.ua з адресою домену. Ми додамо його в постійний виняток на боці сервісу; підтверджувати право власності при цьому не потрібно, бо заборона нікому не шкодить.
Чому бот узагалі до вас прийшов
Хтось ввів адресу вашого сайту у формі перевірки. Це могли бути ви, ваш підрядник, клієнт або менеджер SmartGT, який готувався до розмови з вами. Ми не обходимо інтернет суцільно й не тримаємо власного списку доменів для обходу.