[19.01.18] Поиск новых страниц на больших сайтах

Мы ускорили обнаружение новых документов сайта для крупных ресурсов.

Теперь документы наиболее оперативно будут попадать из числа тех что есть в sitemap, но не известны нашему сервису. Это ускоряет попадание новых страниц в систему до одного дня.

Если ваш сайт своевременно генерирует карту сайта, ты мы обязательно найдем новые документы в течении суток.