Глава 6. Эволюция: Разделение вычислений и хранения (Cloud Native)

• Проблема Shared-Nothing: Ограничения классической архитектуры при масштабировании и ребалансировке. • SharedMergeTree и Shared Catalog: Новая архитектура для облака. Хранение данных в объектном хранилище (S3) и отсутствие привязки вычислительных узлов к диску (stateless compute). • Кэширование: Роль локального кэша на SSD и распределенного кэша для ускорения работы с S3. • Легковесные транзакции и метаданные: Хранение метаданных в Keeper и атомарность операций. Заключение. Экосистема и интеграции • Внешние словари и прямые запросы к Data Lakes (Iceberg, Delta Lake, Hudi). • Инструменты для диагностики: system-таблицы (query_log, metrics) и EXPLAIN запросов. • Будущее: Поддержка полуструктурированных данных (JSON type) и векторизация.