Бот
Как мы проверяем сайты
Бесплатная проверка ходит по сайту как обычный посетитель. Мы ничего не меняем и не входим в админку.
Имя бота
User-Agent: YasnoSEOBot/0.1 (+https://yasnoseo.by/bot/)
Что открываем
- главную страницу по http и https, с www и без www;
/robots.txtи соблюдаем его для нашего бота;/index.phpи/index.html— нет ли копии главной, и для двух страниц — тот же адрес со слэшем на конце и без него;- карту сайта и вложенные файлы индекса в пределах лимита;
- до 40 адресов из разных разделов карты сайта;
- пробный несуществующий адрес и сертификат на порту 443;
- значок сайта (favicon) и картинку для соцсетей из тега og:image — только чтобы убедиться, что они открываются.
Для замера скорости мы просим сервис Google PageSpeed Insights открыть главную. Этот запрос приходит от робота Google (Lighthouse), а не от нашего бота.
Для картинки в шапке отчёта главную один раз открывает браузер Chrome без окна — в виде компьютера и телефона. Его User-Agent — обычный Chrome с припиской YasnoSEOBot/0.1. Он загружает страницу со стилями и картинками, но не видео, и ничего не нажимает.
Чего не делаем
- не логинимся и не отправляем формы на проверяемом сайте;
- не ходим на порты кроме 80 и 443;
- не обращаемся к внутренним адресам, localhost и служебным диапазонам;
- не качаем ответы больше заданного предела.
Если бот мешает, ограничьте частоту для этого User-Agent или напишите на support@yasnoseo.by.