25 жовтня відбудеться онлайн мітап із Олексієм Нікітчуком — Lead Data Engineer в Uklon. Олексій має більше 10 років досвіду в ІТ, останні 7 років тримає фокус на роботі з даними (Data Engineering). В Uklon відповідає за проєктування та впровадження Data Platform 2.0 на базі Snowflake.
Робота з даними — одна із ключових функцій у продуктовій розробці Uklon. На основі цих даних приймаються рішення щодо необхідності розробки нових функцій чи покращення вже існуючих.
Також, в Uklon створюються окремі сервіси, які працюють виключно на основі даних: TrafficJam, ETA, DynamicPricing.
З ростом об’ємів даних, почали проявлятись недоліки першої версії нашого DWH. А саме:
— scalability
— performance
— ріст операційної роботи
— ускладення процесів.
На мітапі розповімо, як було вирішено ці проблеми завдяки новій концепції генерації, збору, зберігання та роботи з даними. Чому перейшли з RabbitMQ на Kafka, мігрувати з Postgres до Snowflake та змінили ETL на ELT.
Де? Онлайн
Коли? 25 жовтня о 19:00
Квитки: https://teeko.io/event/uklon-data-warehouse-20-vid-relyatsijnih-baz-do-snowflake
100% коштів від продажу квитків будуть переведені у благодійний фонд Твоя Опора для закупівлі апартів для дитячої реанімації, де рятують життя дітей, які постраждали внаслідок російської агресії.
1 коментар
Додати коментар Підписатись на коментаріВідписатись від коментарів