При поддержке JUG Ru Group
Бесплатный онлайн-митап по дата-инжинирингу
IT_One Data Meetup: обработка и хранение данных
2 доклада
Дискуссии
Бесплатно
Розыгрыши призов
Дисскусии
Розыгрыши призов
Бесплатно
2 доклада
Программа
18:10 – 19:00
19:00 – 19:45
19:45 – 19:50
На примере финансовых данных Анна расскажет о существующих способах и проблемах дедупликации большого объема данных невысокого уровня качества, а также о методах решения проблем с помощью Apache Hive и других инструментов.
Сергей расскажет о том, как использование готовых данных в виде JSON позволяет значительно уменьшить количество промежуточных операций и быстрее отдать данные клиенту.
18:00 – 18:10
Открытие
Как обойти грабли при очистке данных от дубликатов с помощью Apache Hive
Кэширование ответов с помощью JSONB для высоконагруженных сервисов
Закрытие
Евгений Виноградов (ЮMoney)
Анна Зверькова (IT_One)
Сергей Мелекшаян (IT_One)
Евгений Виноградов (ЮMoney)
Скачать презентацию
Скачать презентацию
Спикеры
  • Анна Зверькова (IT_One)
    Разработчик
    Участвовала в проекте по построению витрины данных БКИ для регуляторов и построению витрины обязательных резервов для Сбербанка. Владеет SQL (HiveQL), Python, Hadoop.
  • Сергей Мелекшаян (IT_One)
    Разработчик
    Три года опыта корпоративной разработки. Работал в Luxoft, с недавнего времени работает в IT_One. В свободное время занимается инвестированием и спортом.
  • Евгений Виноградов (ЮMoney)
    Директор департамента аналитических решений
    Окончил факультет прикладной математики и процессов управления СПбГУ, кандидат физико-математических наук. IT-разработкой занимается 20 лет в разных областях — от разработки САПР до дата-инженерии и ML. Сейчас в YooMoney отвечает за проекты Департамента аналитических решений. Любит рассказывать о полученном опыте на конференциях, занимается разработкой учебных курсов и преподаванием.

IT_One — компания, которая специализируется на разработке ПО для крупного российского бизнеса и реализует проекты по цифровой трансформации в масштабах всей страны. Мы занимаемся всем спектром задач от поддержки приложения до разработки концептуальной бизнес-архитектуры уровня корпорации. При этом для нас важна не только экспертность в IT, но и творческий подход.

Мы работаем, чтобы ускорить темпы цифровизации России и изменить жизнь к лучшему!
Информационные партнеры:
Code of Conduct
© 2012–2023 JUG Ru Group
Зарегистрироваться
Зарегистрироваться