Yandex Cloud Data Platform — про Greenplum® и не только

22 ноября в 16:00 (мск) провели митап, посвящённый аналитическим СУБД и работе с ними в новых условиях. В конце мая Broadcom закрыла код Greenplum® и заархивировала проект на портале GitHub. В результате сообщество разработчиков прекратило развитие продукта. Мы уверены, что это не конец, а скорее даже наоборот: Greenplum® уже несколько раз умирал и заново возрождался. Сейчас самое время реализовать новые фичи и сделать БД лучше. На митапе вы узнали, как мы планируем вести разработку дальше и когда ожидать новинок. Для вас выступили спикеры из Yandex Cloud, разработчики СУБД Cloudberry из компании HashData и другие интересные докладчики. О чём говорили: Yandex Cloud Всеволод Грабельников с командой рассказал, как перенести свои разработки в открытый репозиторий и продолжать развивать Managed Greenplum® на базе этого репозитория. Андрей Бородин поделился историей развития Compute Storage Separation в массивно-параллельных системах. Год назад мы запустили Hybrid Storage для Greenplum®, получили опыт эксплуатации, закопали вторую версию, разработали третью — и готовы поделиться опытом, как надо делать. Cloudberry Сооснователь и СЕО HashData Lirong Jian вместе с вице-президентом по разработке и CTO рассказали историю разработки Cloudberry, возможностях, функционале, планах развития этой СУБД, а также ответили на вопросы зрителей. Вы также узнали, как разворачивать и использовать Cloudberry в Yandex Cloud, а ещё мы поделились кейсами практического опыта пользователя после закрытия репозиториев. Митап полезен тем, кто уже работает с Greenplum® или только пришел к задаче консистентного анализа данных. Таймкод: 00:00 Приветствие (Всеволод Грабельников) 01:54 Программа мероприятия (Антон Авдонин) 03:48 Про версию Greenplum (Леонид Борчук) 06:40 Команда разработчиков (Леонид Борчук) 08:29 Багфиксы, адаптация, портирование функций (Леонид Борчук) 10:30 Основная ветка и планы (Леонид Борчук) 11:56 Как репортить проблему (Леонид Борчук) 13:58 Планы улучшений (Леонид Борчук) 15:02 Что было сделано (Леонид Борчук) 32:19 Ответы на вопросы (Леонид Борчук) 38:41 Сообщество и взаимодействие в Greenplum (Андрей Бородин) 40:48 Текущие идеи и разработки (Андрей Бородин) 46:03 Что сейчас в работе (Андрей Бородин) 56:12 Источники задач для разработки (Андрей Бородин) 57:06 Ответы на вопросы (Андрей Бородин) 01:07:55 Приветствие и план доклада (Max Yang) 01:09:32 Введение в Cloudberry (Max Yang) 01:11:49 Архитектура Cloudberry (Max Yang) 01:29:10 Примеры использования и функционал Cloudberry (Max Yang) 01:42:13 Планы развития Cloudberry (Max Yang) 01:50:37 Приглашение в сообщество Cloudberry (Max Yang) 01:51:47 Ответы на вопросы (Max Yang) 01:53:01 Приветствие (Lirong Jian) 01:54:25 Cloud-Native Data Platform (Lirong Jian) 01:56:31 Слои архитектуры Cloudberry (Lirong Jian) 02:02:54 Пример сценария использования (Lirong Jian) 02:06:19 О команде и итог доклада (Lirong Jian) 02:08:41 История использования данных в Сбер (Дмитрий Добров) 02:11:57 Инфраструктура Greenplum (Дмитрий Добров) 02:13:06 Проблемы и решения в Greenplum (Дмитрий Добров) 02:16:16 Инструмент управления нагрузкой (Дмитрий Тархов) 02:19:23 Функциональность инструмента (Дмитрий Тархов) 02:22:44 Статистика использования (Дмитрий Тархов) 02:24:05 Дальнейшие планы развития (Дмитрий Добров) 02:26:45 Ответы на вопросы (Дмитрий Добров, Дмитрий Тархов) 02:38:40 Заключение