Яндекс в открытый доступ выложил технологию обработки данных

Компания выложила в открытый доступ YTsaurus Flow — технологию непрерывной обработки больших потоков данных.

Об этом пишет ТАСС со ссылкой на пресс-службу компании. Там рассказали, технология «обрабатывает клики, лайки и другие события в интернете сразу же — по мере их появления».

Такие данные обычно скапливаются и обрабатываются с задержкой, которая может длиться несколько часов. Решение выдерживает большую нагрузку, обрабатывает событие один раз и работает при сбоях.

Разработку уже используют в Яндексе. Технология в рамках открытой платформы YTsaurus для хранения и обработки больших данных помогает быстрее собирать статистику «Я Маркету», выявлять мошенников — антифроду, подбирать интересные предложения «Я Рекламе».

изображение magnific