Яндекс открыл доступ к YTsaurus Flow — технологии для непрерывной обработки больших потоков данных. Об этом Russian Business сообщили в пресс-службе компании.
Система анализирует клики, лайки, заказы и другие действия пользователей почти в реальном времени. Это помогает алгоритмам быстрее учитывать смену интересов и точнее формировать рекомендации.
Обычно данные о действиях пользователей сначала накапливаются, а затем отправляются в обработку. Из-за этого задержка может достигать нескольких часов. YTsaurus Flow обрабатывает информацию сразу по мере поступления.
По данным компании, инструмент рассчитан на высокую нагрузку. Он не теряет и не дублирует данные, а при сбоях продолжает работу за счёт перераспределения нагрузки между серверами.
Технологию можно применять для разных задач. Яндекс уже использует YTsaurus Flow в своих сервисах.
- На Яндекс Маркете система помогает быстрее собирать статистику для продавцов.
- В антифрод-сценариях она помогает выявлять действия злоумышленников.
- В Яндекс Рекламе технология применяется для подбора более релевантных предложений пользователям.
По информации компании, YTsaurus Flow позволяет бизнесу одновременно работать с накопленными данными и новой информацией, которая поступает в систему в текущий момент.
Разработка доступна по лицензии Apache 2.0. Это позволяет использовать YTsaurus Flow, в том числе в коммерческих проектах.
Источник: Источник
