Data Engineer
Освойте профессию Data Engineer с нуля с практикой в Yandex Cloud!
Длительность обучения:
4 месяца
Формат:
Online
Начало занятий:
25 октября 2023 года
Что даст вам этот курс
- Понимание ценности данных для бизнеса и архитектуры
- Узнаете, как организовать хранение данных, познакомитесь с методами проектирования хранилищ
- Сможете разрабатывать ETL процессы для выгрузки данных из внешних источников
- Научитесь преобразовывать данные в пакетном и потоковом режимах
- Узнаете что такое качество данных и как работать с метаданными
- Изучите современные BI инструменты и научитесь создавать витрины данных
Для кого этот курс?
Курс поможет разработчикам, администраторам, архитекторам освоить востребованную профессию инженера данных.После обучения вы сможете:
- разворачивать, налаживать и оптимизировать инструменты обработки данных
- адаптировать датасеты для дальнейшей работы и аналитики
- создадите сервисы, которые используют результаты обработки больших объемов данных
- принимать участие в разработке архитектуры данных в компании
Особенности курса
Инженер данных - почему это актуально и интересно:
- Прежде чем попасть на стол CEO в виде квартального отчета или индивидуальной подборкой книг в email-рассылке, данные проделывают длительный и сложный, полный преобразований и трансформаций, путь, требующий непрерывного мониторинга и оркестрации.
- В этом ключе команда инженеров, которая готова обеспечить непрерывную поставку достоверной информации для всех бизнес-потребителей и функций играет важнейшую роль в принятии тактических и стратегических решений всей компании.
- Работа инженеров данных, внешне незаметная, удивительно сложна и интересна по своей специфике. Невероятное количество закономерностей и связей, инструментов и подходов, параметров и настроек не оставят равнодушным ни один пытливый ум в поисках оптимальных и элегантных решений.
Необходимые знания
- Опыт разработки на Java/Python
- Основы работы с БД: SQL, индексы, агрегирующие функции
- Базовые знания ОС: работа с командной строкой, доступ по SSH
Будет плюсом:
- Навыки работы с Docker
- Знакомство с компонентами экосистемы Hadoop
- Понимание основ машинного обучения с позиции Data Scienist-а или аналитика
- Основные возможности языка Python
- Создание сайтов на Django
- Библиотеки для анализа данных
- Подготовка к курсам "Web-разработчик на Python" и "Разработчик Python"
Корпоративное обучение для ваших сотрудников
Программа обучения
Выпускной проект
В рамках подготовки проекта будут даны вводные и проведены консультации.
Несколько примеров проектных работ студентов прошлых запусков:
- Serverless решение для сбора статистики эффективности рекламных кампаний на GCP;
- Сбор и анализ скорости отдачи статики различными CDN на web страницах;
- Система хранения и автоматического тестирования CV нейросетей;
- Загрузка данных о полетах из API аэропорта Schiphol в БД Elasticsearch.
Вы можете выбрать тему проектной работы предложенную партнёром курса SberAutoTech
- Поиск слепых зон в лидарных данных
- Витрина беспилотного пробега и перехватов управления
Процесс обучения
Получить консультацию
После обучения вы
- основные и дополнительные материалы, и видеозаписи занятий;
- образцы кода;
- собственный проект, который можно будет показывать при трудоустройстве;
- сертификат о прохождении обучения.
- будете иметь представление об основных классах задач Инженера Данных, инструментах, предназначенных для их решения, а также их преимуществах и особенностях;
- научитесь выстраивать пайплайны пакетной и потоковой обработки данных;
- сможете проектировать хранилища данных и организовывать оптимальный доступ для потребителей;
В результате обучения вы:
онлайн-образование
Сертификат №0001
Константин Константинопольский
Успешно закончил курс «Data Engineer»
Выполнено практических заданий: 16 из 16
Общество с ограниченной ответственностью “Отус Онлайн-Образование”
Дата выдачи:
24 марта 2024 г.
Город:
Москва
Зам. директора департамента образования
ООО “Отус Онлайн-Образование”
Вдовиченко М.M.
№ 039825 от 28 декабря 2018 года.