Чего все хотят от дата-аналитиков Wildberries — подкаст «Слон в IT-лавке»
Как собрать десятки тысяч PostgreSQL, тысячи ClickHouse и Kafka, петабайты данных и десятки миллиардов событий в день в единую управляемую платформу? Разбираемся в четвертом выпуске «Слона в IT-лавке». Закажите бесплатное тестирование наших решений для аналитики данных. Postgres Pro AXE: https://clck.ru/3VETvB Tengri Data Platform: https://clck.ru/3VETwG В гостях у сооснователя Postgres Professional Ивана Панченко: - Лестат Ким, руководитель дата-офиса Wildberries & Russ - Алексей Викулин, руководитель по развитию бизнеса Postgres Professional Гости обсудили работу с данными без рекламного глянца: Почему Wildberries перестал устраивать Greenplum? Зачем компания создает собственную S3-реализацию? Как выбирать между готовым продуктом, Open Source и внутренней разработкой? Кто определяет качество данных и решает, сколько их хранить? И почему дата-платформа тратит деньги, но не обязана зарабатывать их напрямую? А еще — архитектурная ошибка ценой в полтора года, страхи CDO и главный вывод выпуска: технологии давно стали понятными, а самое сложное по-прежнему начинается там, где появляются люди. 00:00 Главное в выпуске и знакомство с гостями 05:38 Зачем Wildberries единая платформа данных 08:59 Эволюция стека: от MS SQL и NATS до Kafka, Greenplum и lakehouse 14:56 Деньги, оборудование и дефицит сильных инженеров 19:42 Данные — новая нефть? Что хранить и откуда берется качество 27:54 Купить или разработать: Open Source, MPP, Lakehouse и экономика решений 34:44 Масштаб Wildberries: петабайты, кликстрим и машинное обучение 40:21 Когда компании нужен дата-офис и почему его рождение начинается с кризиса 45:32 Зачем Wildberries собственная S3-реализация и при чем здесь Rust 51:26 Ошибка ценой в полтора года, страхи CDO и роль дата-платформы Наши соцсети: Телеграм — https://t.me/postgres_pro Макс — https://max.ru/id7729445882_biz ВКонтакте — https://vk.com/postgrespro Хабр — https://habr.com/ru/companies/postgrespro/profile/ Рутуб — https://rutube.ru/channel/38932104/ Дзен — https://dzen.ru/postgrespro
Как собрать десятки тысяч PostgreSQL, тысячи ClickHouse и Kafka, петабайты данных и десятки миллиардов событий в день в единую управляемую платформу? Разбираемся в четвертом выпуске «Слона в IT-лавке». Закажите бесплатное тестирование наших решений для аналитики данных. Postgres Pro AXE: https://clck.ru/3VETvB Tengri Data Platform: https://clck.ru/3VETwG В гостях у сооснователя Postgres Professional Ивана Панченко: - Лестат Ким, руководитель дата-офиса Wildberries & Russ - Алексей Викулин, руководитель по развитию бизнеса Postgres Professional Гости обсудили работу с данными без рекламного глянца: Почему Wildberries перестал устраивать Greenplum? Зачем компания создает собственную S3-реализацию? Как выбирать между готовым продуктом, Open Source и внутренней разработкой? Кто определяет качество данных и решает, сколько их хранить? И почему дата-платформа тратит деньги, но не обязана зарабатывать их напрямую? А еще — архитектурная ошибка ценой в полтора года, страхи CDO и главный вывод выпуска: технологии давно стали понятными, а самое сложное по-прежнему начинается там, где появляются люди. 00:00 Главное в выпуске и знакомство с гостями 05:38 Зачем Wildberries единая платформа данных 08:59 Эволюция стека: от MS SQL и NATS до Kafka, Greenplum и lakehouse 14:56 Деньги, оборудование и дефицит сильных инженеров 19:42 Данные — новая нефть? Что хранить и откуда берется качество 27:54 Купить или разработать: Open Source, MPP, Lakehouse и экономика решений 34:44 Масштаб Wildberries: петабайты, кликстрим и машинное обучение 40:21 Когда компании нужен дата-офис и почему его рождение начинается с кризиса 45:32 Зачем Wildberries собственная S3-реализация и при чем здесь Rust 51:26 Ошибка ценой в полтора года, страхи CDO и роль дата-платформы Наши соцсети: Телеграм — https://t.me/postgres_pro Макс — https://max.ru/id7729445882_biz ВКонтакте — https://vk.com/postgrespro Хабр — https://habr.com/ru/companies/postgrespro/profile/ Рутуб — https://rutube.ru/channel/38932104/ Дзен — https://dzen.ru/postgrespro