Дайджест докладов: Артем Дайнеко, Максим Мартынов и Саттар Гюльмамедов, Марк Порошин, Диана Ударцева и Дмитрий Зуев

Артем Дайнеко, Авиасейлс

«Разнообразие требований к Data Warehouse. Как говорить с заказчиком, чтобы ничего не пропустить»

Артем поделится списком вопросов к заказчику, которые помогут учесть требования к постройке нового Data Warehouse. А для уже существующего DWH — изолировать проблемные группы запросов, для которых стоит выделить отдельные подсистемы. Вас ждут примеры на Impala/Hive, ClickHouse, ScyllaDB/Cassandra и PostgreSQL.

Максим Мартынов и Саттар Гюльмамедов, МТС Digital

«Эволюция ETL-инструментов на примере отдельно взятой Big Data»

Спикеры расскажут, как менялись пользовательские подходы к организации и реализации ETL-процессов, и как вслед за ними менялись инструменты. Вы узнаете, почему в команде спикеров решили отказаться нестандартных собственных инструментов Hadoop в пользу более стандартного Spark, и к каким результатам это привело.

Марк Порошин, Smart Prediction Technologies

«Data Vault на Greenplum c помощью DBT»

Марк расскажет, как можно построить Data Vault на Greenplum с помощью DBT, а также про оркестровку ELT-пайплайна с помощью Dagster. Спикер уделит внимание тонкостям работы с DBT и тому, как использовать его в связке с Greenplum. Также он расскажет о реализованном адаптере и патче для пакета dbtvault.

Диана Ударцева и Дмитрий Зуев, Тинькофф

«Как продуктовый дизайн влияет на разработку ETL-платформы»

Диана и Дмитрий расскажут, как в Тинькофф переосмысли интерфейс для разработки ETL-процессов на примере собственного DWH-инструмента для Batch ETL — TEDI, призванного заменить SAS. Они также покажут, как пользовательский опыт влияет на разработку инструмента, какой профит от продуктового дизайна получают все участники процесса и почему отсутствие дизайна в техническом продукте может помешать вырастить мощный перспективный сервис.

Подробности, полная программа и билеты — на сайте: https://bit.ly/3Mn2mWF