🔥 Яндекс открыл доступ к исходному коду собственной платформы для работы с большими данными — YTsaurus (читать надо как вай-ти-завр, отсюда и динозаврик в качестве маскота)
Это платформа для хранения и обработки больших данных, с которой работает большинство сервисов Яндекса. Её можно использовать как классическую MapReduce-систему или воспользоваться более верхнеуровневым движком с привычными интерфейсами ClickHouse или Apache Spark.
«Вайтизавр» можно легко развернуть в kubernetes. Система может обрабатывать эксабайты данных. С помощью YTsaurus строят DWH, занимаются аналитикой и обучают сложные модели с миллиардами параметров. Подробнее в статье на Хабр.
Сайт YTsaurus (доступно демо)
Вакансии YTsaurus для бэкендеров
Это платформа для хранения и обработки больших данных, с которой работает большинство сервисов Яндекса. Её можно использовать как классическую MapReduce-систему или воспользоваться более верхнеуровневым движком с привычными интерфейсами ClickHouse или Apache Spark.
«Вайтизавр» можно легко развернуть в kubernetes. Система может обрабатывать эксабайты данных. С помощью YTsaurus строят DWH, занимаются аналитикой и обучают сложные модели с миллиардами параметров. Подробнее в статье на Хабр.
Сайт YTsaurus (доступно демо)
Вакансии YTsaurus для бэкендеров