Доклады SmartData 2023 — Architecture of Data Platforms

Николай Голов из ManyChat — «Моделирование потоков событий в эволюционирующем окружении»

Николай покажет гибридный подход для работы с потоком из сотен тысяч событий из внешних систем (кликстрим, веб-хуки и т.п.). Он расскажет, как хранить и использовать разнородные события в аналитике, а также продемонстрирует статистику по использованию гибридного подхода в Snowflake на десятках млрд событий.

Максим Стаценко из Яндекса — «Я изменю ваш взгляд на хранилище данных за 30 минут»

Современные бизнес процессы заточены под два основных события — «данные собрались» и «данные обновились». И это было нормально в OLAP-таблицах 30 лет назад, но сейчас данные обновляются неравномерно. Теперь данные — это API к информации, и мы можем запрашивать ее разное состояние. Максим расскажет, как хранить данные такого типа и какой подход для этого предложил Google еще в 2015 году.

Дмитрий Аношин из Surfalytics — «Примеры реальных аналитических решений и дата-команд в западных компаниях»

Дмитрий — консультант по внедрению аналитических решений. Он поделится рабочим опытом из западных компаний: расскажет о типовой архитектуре каждого проекта, взаимоотношении с бизнес-пользователями, размере аналитической команды, а также про соотношение инженеров\аналитиков\менеджеров. Не обойдется без косяков, факапов и других забавные вещей.

Аркадий Василенко из Одноклассников, Павел Филонов — Собеседование «ML System Design»

Нанимая DE или MLE, в больших компаниях часто вставляют секцию под названием ML System Design. Ожидается, что кандидат сможет продемонстрировать свои навыки по дизайну архитектуры ML-системы под сформулированные требования. Чтобы помочь всем потенциальным кандидатам, спикеры разберут процесс такого собеседования.

Другие доклады об архитектуре дата-платформ и программа конференции — уже на сайте SmartData 2023.