Курс Big Data

Курс дає змогу опанувати сучасні методи й алгоритми теорії інтелектуального аналізу великих даних та машинного навчання та сформувати реальні навички в аналізі, обробці, пошуку шаблонів та побудуванні прогнозів на основі даних.

Програма курсу

• Вступ в курс. Налаштування середовища. Базові знання і вміння програмування Python і Scala
• Hadoop, файлова система HDFS і парадигма MapReduc
• NoSQL середовища. Теорема CAP. Apache Cassandra
• Apache Spark Core
• Apache Spark: DataFrames, DataSets
• Apache Spark: аналіз виконання і оптимізація роботи
• Задачі машинного навчання з Apache Spark
• Оркестрація обчислень: Docker + Kubernetes
• Оркестрація обчислень: Apache Airflow
• Збираємо все в одне ціле: пишемо проект на Apache Spark з аналізом вхідних даних і записом в Cassandra
• Оркестрація проєкту за допомогою Apache Airflow
• Візуалізація результату в Grafana

Особливості курсу

• Заняття 2-3 рази на тиждень
• Можливість оплати частинами
• Знижка -10% на наступний курс

Мінімальні вимоги

• Дуже бажане (але не обов’язкове) володіння знаннями з теорії ймовірностей: дискретна та неперервна випадкова величина, математичне сподівання, дисперсія, умовне математичне сподівання
• Володіння на початковому рівні  мовою програмування Python

Викладачі курсу

• Михайло Макуха – Data Scientist