Практическое руководство по сборке дата-платформы
В докладе старшего бэкенд-разработчика Go Дениса Тингайкина и руководителя по развитию продуктов хранения данных Александра Гришина на Selectel ТехноДень разобрали, как самостоятельно построить масштабируемую платформу для DWH- и DLH-сценариев. Такая система объединяет разрозненные источники данных для аналитики и дополняет привычные инструменты. В этой архитектуре S3 отвечает за объектное хранение, а ClickHouse и Trino — за аналитические запросы. Для работы с таблицами и метаданными в стек входят Iceberg и Metastore, а результаты можно визуализировать в Redash. На этой связке показали, как компоненты работают вместе. Cервисы платформы данных Selectel — https://slc.tl/m4fj8
Название:
Практическое руководство по сборке дата-платформы
Категория:
Технологии и интернет