ТОП-12 курсов Data Engineer: обучение онлайн
Data Engineer работают с данными, а именно собирает, перемещает и обрабатывает информацию, создает инфраструктуру, разрабатывая пайплайн по ее обслуживанию.
Покорить сферу дата-инжиниринга поможет качественное образование. Мы собрали лучшие онлайн курсы по Data Engineering для дистанционного обучения с нуля, включая образовательные программы с выдачей сертификатов, дипломов и трудоустройством.
Курс по Data Engineering от SkillFactory
Обучение рассчитано на 10 недель, курс ориентирован на практику и современные инструменты. Вы получите для портфолио пайплайны, готовый код, помощь с трудоустройством и стажировкой, цифровой сертификат. Программа построена по принципу от простого к сложному, что упрощает усвоение материала.
Программа курса
- Практика в Linux.
- Хранилища данных, особенности современных инструментов.
- Работа с экосистемой Hadoop.
- Работа с информацией, основные источники.
- Обработка инфо, Apache Spark.
- Работа в Hadoop.
- Оркестрация конвейеров, Apache Airflow.
- Обзор облачных хранилищ.
Для кого
Курс предназначен для профессиональных бизнес-аналитиков, специалистов по Data Science, аналитиков, разработчиков, менеджеров, руководителей.
Чему научитесь
Строить пайплайны данных в реальном времени. А также выстраивать потоки, автоматизировать процесс сбора, очистки информации.
Формат обучения: лекции, практические задания, сквозной и итоговый проект.
Рассрочка: на 12 месяцев.
Стоимость обучения: 32 400рублей.
Факультет Data Engineering от GeekBrains
Программа рассчитана на 12 месяцев, результат обучения — диплом и трудоустройство. В программе: +140 часов обучающего контента, +270 часов практики, еженедельно 2-3 вебинара. Достоинства курса: разные форматы обучения, несколько уровней сложности на выбор, доступ к материалам курса не ограничен по времени, при полной оплате 20% скидка.
Программа курса
- Подготовительный модуль, изучение GIT.
- Сбор и хранение информации.
- Построение для систем аналитики хранилищ данных.
- Распределенные БД.
- Инфраструктура, потоковая обработка информации.
- Экосистема Hadoop, с акцентом на JVM.
- Linux. Рабочая станция.
Для кого
Программа предназначена для новичков без базовых знаний и начальной подготовки.
Чему научитесь
- Работать с информацией, включая сбор и обработку, а также разрабатывать инфраструктуру,проектируя хранилища.
- Создавать пайплайны обработки, поддерживать и оптимизировать схемы, ML на Python и Spark.
- Архитектуру разрабатываемых решений прорабатывать до мелочей.
- Создавать аналитические системы для хранения, обработки Big Data.
- Понимать принципы работы БД, ML, методологию моделирования, процесс подготовки инфо для ML-приложений.
- Работать с Airflow, Devops и другими инструментами.
- Собирать процесс очистки, валидации инфо.
- Работать с ОС Linux, ETL-инструментами и сервисами.
- Выгружать информацию в аналитическое хранилище, работать с пакетами и потоками информации.
- Разрабатывать витрины данных для аналитики.
- Работать с кластером Hadoop, HDFS, мониторить свои приложения.
Формат обучения: групповые занятия с преподавателем, лекции и вебинары в онлайне, занятия в записи, ДЗ, практические задания, личные консультации.
Рассрочка: на 36 месяцев.
Стоимость обучения: от 5379рублей/мес.
Курс Профессия Data Engineer от Skillbox
В программе тематические модули, +80 практических заданий, 3 проекта с разным уровнем сложности для портфолио. Плюсы: авторы курса дата-сайентисты из крупных банков, актуальность информации, гарантия трудоустройства.
Программа курса
- Data Science, основные дисциплины: математика, статистика, теория вероятности.
- Введение в дата-инженерию, уровень предполагает трудоустройство.
- Data Engineer Advanced.
- Бонусные курсы: карьера разработчика, Git, английский язык для IT-разработчиков.
Для кого
Курс подойдет программистам, новичкам, начинающим аналитикам.
Чему научитесь
- Применять инструменты анализа, включая языки программирования, современные библиотеки и фреймворки.
- Эффективно взаимодействовать с заказчиком, готовить отчеты и согласовывать инфраструктуру данных.
- Обрабатывать данные, а именно подключаться и загружать в систему источники информации. А также, очищать, сохранять и интегрировать информацию.
- Разворачивать Data Science проект. Загружать данные, собирать из разных источников информацию, выстраивать пайплайн проекта.
- Проводить регрессионное тестирование. Исследовать пакеты, пайплайны и делать обработку ошибок.
- Работать в команде используя облако, Git.
Формат обучения: видеолекции, практика с качественной обратной связью, итоговый проект.
Рассрочка: предусмотрена.
Стоимость курса: от 6785рублей/мес.
Профессия: Data Engineer от ProductStar
В программе более 50 лекций и заданий с проверкой, формат обучения — асинхронный. Плюсы: помощь в подготовке к собеседования и с трудоустройством, нетворкинг, выдача сертификата, реальные кейсы в портфолио.
Программа курса
- SQL, работа с данными.
- Python, мат.модели и обработка данных.
- Хранилище данных DWH.
- BI-решения и аналитика Big Data.
Для кого
Курс предназначен для людей с базовыми навыками в Digital.
Чему научитесь
- Работать SQL, писать запросы, работать с информацией в базе и не переносить их в таблицы, сохранять историю, загружать данные, работать с файлами в разных форматах.
- Применять Python и библиотеки анализа данных. Автоматизировать работу с Big Data, черпать данные из внешних источников, делать выводы на основании полученных данных.
- Оптимизировать системы работы с информацией. Создавать определенные условия для хранения данных компании. Настраивать в дата-инструментах и конфигурировать ETL / ELT-процессы.
- Объяснять архитектуру и структуру БД. Проектировать схемы хранилищ, под задачу, бюджет выбирать DWH.
Формат обучения: видеоуроки, ДЗ, общение с наставником, защита дипломного проекта.
Рассрочка: 7300 руб.
Стоимость обучения: 39 000 руб.
Курс Data Engineer от OTUS
Длительность обучения 4 месяца, еженедельная нагрузка 4 ак. часа. Плюсы: высокая практическая направленность, практика в Yandex.Cloud, сертификат, скидки.
Программа курса
архитектура, озеро данных, DWH, NoSQL, NewSQL, MLOps.
Для кого: разработчиков, администраторов СУБД и всем, кто решил повысить профессиональный уровень, изучить новые инструменты.
Чему научитесь: разворачивать, налаживать и оптимизировать инструменты обработки информации, адаптировать датасеты для дальнейшей аналитики и работы, создавать сервисы для обработки больших объемов данных, выстраивать архитектуру данных в компании.
Формат обучения: онлайн-вебинары, ДЗ, защита выпускного проекта.
Рассрочка: предусмотрена.
Стоимость обучения: 89 000рублей.
Курс Дата-инженер с нуля до middle от Нетологии
Обучение длится 3 месяца, в программе более 70 практических заданий, включая лабораторные работы и тесты. Плюсы: уровень с нуля, диплом, 6 кейсов в портфолио, упор на практику, нетворкинг, помощь в трудоустройстве.
Программа курса
- Хороший аналитик. Запросы SQL, работа с хранилищем данных. Проектирование аналитической БД, создание свой OLAP-куба, подключение Business Intelligence решения.
- Data Engineer. Работа с Python, hadoop, создание витрин данных. Использование продвинутых методов работы с данными, обработка данных через Spark. Конвейер обработки данных, работа с БД для хранения и обработки потоковых данных. Создание облачной БД и запуск Pipeline в облаке.
- ML-engineer. Модели машинного обучения, классификатор, регрессия, обучение нейронной сети. CI/CD, запуск сервиса в кластере и масштабируемость ML-модели.
Для кого
Курс подойдет администраторам сетевым и системным, backend, fulltrack разработчикам, новичкам, планирующим карьеру
Чему научитесь
- Объяснять архитектуру, структуру БД.
- Создавать процессы обработки данных.
- Работать с ключевыми инструментами обработки больших данных.
- Обрабатывать в режиме реального времени события.
- Использовать навык data literacy.
- Строить в облаке работающий пайплайн.
- Определять потребности и требования бизнес-пользователей разных уровней.
- Работать с Tableau, Power BI для выполнения отчётности.
- Управлять потоками данных любого размера.
- Выбирать способ организации работы с большими данными.
- Создавать витрины данных.
- Выстраивать конвейер обработки данных.
- Работать с data lakes в облаках, с помощью spark обрабатывать данные.
Формат обучения
вебинары, видеолекции, практика.
Рассрочка: платеж 4500 рублей, срок 24 месяца.
Стоимость обучения: 108 000рублей.
DATA ENGINEER 11.0 от New PRO Lab
В программе 3 занятия в неделю, продолжительность 9 часов. На решение лабораторных работ в среднем необходимо потратить 4-10 часов. При успешном прохождении вы получите сертификат.
Программа курса
подготовка инфраструктуры, Batch-обработка, стриминг, дашборды, Managed-сервисы в облаке, перенос инструментов в свои проекты.
Для кого: аналитиков данных, менеджеров, бэкенд-разработчиков.
Чему научитесь: решать характерные задачи DE, работать в облаке, используя современные инструменты и окружение. А также, развертывать свой облачный кластер, настраивать окружение, работать с документацией. Работать с инструментами ELK, Spark, Airflow, Kafka, HDFS, ClickHouse.
Формат обучения: онлайн-занятия в Zoom, 6 лабораторных работ.
Рассрочка: предусмотрена только для физических лиц.
Стоимость обучения: 125 000 руб.
Инженер данных от онлайн-школы Karpov.Courses
Программа в асинхронном формате, рекомендуемая нагрузка не менее 10 часов в неделю. На курсе предусмотрена программа трудоустройства, с написанием резюме, подготовкой к собеседованию. Есть демо-версия, бесплатно три урока, конспекты и практические задания с разбором.
Программа курса
реляционные и MPP СУБД, автоматизация ETL-процессов, Big Data, проектирование DWH, облачное хранилище, визуализация данных, Big ML, управление информацией и моделями.
Для кого: разработчиков, аналитиков, дата-сайентистов.
Чему научитесь: готовить PostgreSQL и MPP БД, работать инструментом Airflow, автоматизировать ETL-пайплайны, выполнять потоковую обработку информации, проектировать детальный слой DWH, работать с облаком на практике, строить интерактивный дашборд для мониторинга. А также, работать с модулем Spark ML, строить ML-пайплайны, версионировать датасеты, организовывать учёт и трекинг моделей, управлять информацией, контролировать качество и отслеживать их происхождение.
Формат обучения: лекции в записи, ДЗ на удаленном сервере.
Рассрочка: на 5 месяцев, платеж 20 000 рублей.
Стоимость обучения: 80 000рублей.
Дата-пайплайны от Stepik
Программа состоит из 20 уроков, продолжительность 1 час.
Программа курса
дата-пайплайны, Luigi, разбор конфигурации, деплой.
Для кого: backend-разработчиков, data-инженеров, data-аналитиков.
Чему научитесь: организовывать эффективный и бесперебойный сбор, укладку и хранение информации, работать с Luigi в экосистеме Python, писать боевой пайплайн, эффективно принимать решения.
Формат обучения: видеоуроки, тестирование, практические задачи.
Стоимость обучения: 10 $.
Специалист по инженерии облачных данных от Coursera
Программа поможет подготовиться к сертификации, упор на прикладное обучение. Асинхронный формат обучения, рекомендуемая нагрузка 3 часа в неделю, 5 месяцев. Минимальные требования к кандидату: знание SQL, языков программирования.
Программа курса
основы ML, BigData, модернизация, построение конвейеров пакетных данных GCP, потокова аналитика, интеллектуальная аналитика и ИИ.
Для кого: аналитиков, разработчиков, инженеров данных.
Чему научитесь: обрабатывать большие объемы данных, проводить интерактивный анализ данных с помощью BigQuery, работать в Cloud SQL, Dataproc, MySQL, Hadoop/Pig/Spark/Hive.
Формат обучения: видеокурс, практические лабораторные работы.
Стоимость обучения: бесплатно.
Введение в Инжиниринг Данных и Аналитику от Data Learn
Программа насыщена практическими кейсами, которые можно добавить в портфолио. После прохождения курса вы получите сертификат.
Программа курса
БД, SQL, дашборды, визуализация данных, отчетность, создание потоков данных, интеграция данных, облачные вычисления, облачное хранилище данных, Apache Spark, Hadoop, AWS, озера данных.
Для кого: аналитиков, маркетологов, руководителей, предпринимателей, инженеров, финансистов, новичков.
Чему научитесь: использовать инструменты, структурировать данные, увеличить эффективность рекламных каналов, анализировать продажи в динамике и разных разрезах, строить отчеты, загружать и анализировать данные, выстраивать систему аналитики и определять точки роста.
Формат обучения: видео Youtube, чат, материалы в учебники для самостоятельной проработки тем.
Стоимость обучения: бесплатно.
Курс «Инженер данных» от Яндекс Практикум
Программа рассчитана на 6,5 месяцев, состоит на 75% из практики, еженедельная нагрузка 12 часов. В портфолио попадут 10 проектов, а после обучения вам помогут с трудоустройством. Для успешного прохождения курса необходимы знания SQL, Python. Преимущества: понятная теория, практика в тренажере, нетворкинг.
Программа курса
актуализация модели данных, DWH, ETL, Data Ops, CDC, NoSQL, ELT, потоковая обработка данных, облачные технологии.
Для кого: разработчиков, начинающих инженеров данных, аналитиков, специалистов по Data Science.
Чему научитесь: продумывать архитектуру данных, масштабировать потоки данных, проектировать безопасные хранилища, настраивать мониторинг.
Формат обучения: теория с закреплением в тренажёре, ДЗ для самостоятельной практики и работа над кодом с наставником.
Рассрочка: от 9 496рублей/мес.
Стоимость обучения: 95 000рублей.
Data Engineering от robot_dreams
Видеокурс содержит 18 занятий, продолжительность 27 часов. Вас ждет сильный контент и освоение современных инструментов. Плюсы: подписка на 4 месяца в подарок, кейс в портфолио.
Программа курса
введение, Python, SQL, аналитические БД, проектирование хранилищ данных, передача данных между системами, распределенные вычисления, экосистема Hadoop, HDFS, BigData архитектуры, Apache Spark, Spark SQL, оптимизация, потоки данных.
Для кого: разработчика ПО, SQL, ETL, аналитиков данных, специалистов по обработке данных, начинающим инженерам по обработке данных.
Чему научитесь: обрабатывать данные, строить ETL-системы, хранилища, автоматически настраивать обновления дата-пайплайнов и успешно обрабатывать 1 Пбайт данных.
Формат обучения: курс в записи.
Стоимость обучения: уточняется после регистрации.