Рекомендации успевают за сменой интересов пользователей — Яндекс выложил в опенсорс YTs...
Рекомендации успевают за сменой интересов пользователей — Яндекс выложил в опенсорс YTsaurus Flow, технологию для непрерывной обработки больших потоков данных Человек уже выбирает товары для дома, а алгоритм ещё несколько часов уверен, что ему нужны билеты на самолёт. Flow сокращает этот разрыв: учитывает клики, лайки и заказы в момент появления, ничего не теряя и не дублируя. Особенно это заметно в ML: в Рекламе Яндекса подготовка данных для дообучения некоторых моделей раньше занимала больше 10 часов, а теперь эту задержку почти полностью устранили. Пригодится тем, кто готовит датасеты для нейросетей или считает просмотры и заказы в реальном времени, лицензия Apache 2.0 разрешает коммерческое использование. Забирать — здесь.