Набір учасників [SkillFactory] Професія Data Engineer

[Gadzhi]

Переглянути вкладення 24790
​

Згадка Data Engineer як професії зросла на 88% за 2 роки
Середній рівень окладів-180 000Р/місяць

програма курсу:
1. Введення

• Професія Data Engineer
• Огляд завдань, які вирішує Data Engineer
• Огляд інструментів
• Майбутнє Data Engineering

2. Сховища даних

• Реляційні бази даних та основи SQL
• Data Warehouse (DWH) і його еволюція

• Data Lake
• Data Lineage, Data Governance
3. Екосистема Hadoop

• Огляд Hadoop
• Занурення в HDFS
• Map Reduce і його альтернативи
• Занурення в Yarn і Hive

• Apache Spark
* Огляд Zookeeper, Sqoop, Impala, Hue, hbase
4. Python

• Введення в Програмування на Python
• Основи синтаксису
• Практика програмування

5. Пайплайни даних
* Що таке ETL-процеси?
• Apache Airflow
• NiFi і Kafka

• Робота зі слабо структурованими даними
• Завантаження даних з web
• NoSQL сховища (MongoDB, Cassandra)
• Схеми даних (сніжика, датасет, датаволт)

6. Cloud-платформи

• Робота з Amazon, Google, Microsoft, Yandex
• Практика з aws-cli, boto3, Google Composer
• Порівняння продуктивності

https://privatelink.de/?https://skillfactory.ru/dataengineer