Guest
В очередном выпуске подкаста ко мне пришел интересный гость, Сергей Михалев, который работает техническим директором data platform в Т-Банке. До этого Сергей успел приложить руку к дата платформам Одноклассников и ВКонтакте. В этом видео мы успели с Сергеем обсудить его карьерный путь, который всю дорогу был связан с большими данными. Заодно мы обсудили как само это понятие менялось во времени и как выглядит state of the art сейчас, а также почему мы в Т-Банке переезжаем с Greenplum (mpp база данных) на более модный и молодежный подход с DLH (data lake house) и как имплементирует федеративный подход с data mesh, а также как поверх всего этого работает a/b платформа. А если быть точнее, то список тем, что мы успели обсудить за 2 часа приведен ниже 00:00:00 - Введение и знакомство с гостем 00:03:17 - Ранние годы, образование и профессиональный выбор 00:07:08 - Начало карьеры, оптимизация БД, миграции данных и рост до тимлида 00:13:57 - Рост компетенций 00:15:49 - Работа в «Одноклассниках» над дата инфраструктурой 00:21:07 - Инженерная и экспериментальная культура «Одноклассников» 00:33:01 - Важность данных и много a/b экспериментов как признак зрелого продукта 00:39:23 - Развитие дата-платформы в «Одноклассниках» и переход на позицию технического директора дата-платформы всего VK 00:44:58 - Переход в Т-банк и обсуждение культуры работы с данными, принятой в Т 00:26:39 - Уровень инженерной культуры, дежурства, обработка логов, AB-тесты, интерфейсы для экспериментов. 00:49:04 - Архитектура Greenplum, параллельность, ограничения, расширение кластеров 00:53:12 - Обеспечение надежности, риски при переключениях, резервная система. Ограничения Greenplum 01:01:57 - Новая архитектура дата-платформы с разделением compute и storage 01:08:59 - Новая парадигма работы с данными: внедрение дата контрактов 01:13:16 - Федерализация дата инженеров и передача ответственности в сами продуктовые команды 01:20:42 - Сервисы и дата-продукты, пайплайны, взаимодействие в экосистеме 01:32:14 - Форматы работы: офис против удалёнки 01:36:31 - Баланс работы и личной жизни 01:40:24 - Будущее IT и потенциал биомедицины 01:50:15 - Советы по саморазвитию и поддержанию мотивации 01:53:06 - Завершение и благодарности
