Старт в Data Engineering [ФПМИ] [МФТИ]

Старт в Data Engineering, курс от ФПМИ МФТИ

• Автоматизируете процессы сбора, очистки и анализа реальных данных без разработчиков (ETL)
• Освоите инструменты: Git, SQL, базовый Python
• Научитесь работать с хранилищами данных (DWH)
  
  Описание курса
  
  На курсе мы научимся настраивать и автоматизировать процессы сбора, трансформации, очистки, хранения и первичного анализа данных с помощью SQL и базового Python на примерах реальных задач (примеры задач можно посмотреть в программе ниже).
  Во втором блоке курса начинается работа над выпускным проектом, для которого есть два варианта выполнения:
  
  • взять задачу, заранее подготовленную преподавателями;
  • согласовать собственную тему, например, связанную с работой слушателя.
  На проекте, который подготовили преподаватели, слушателей ждет работа с реальными транзакционными банковскими данными. C помощью Python и SQL слушатели реализуют:
  
  • собственное хранилище данных – DWH;
  • процесс сбора, очистки, трансформации и хранения данных;
  • систему автоматического поиска мошеннических операций (AntiFraud-система).