Що дасть вам цей курс
****
- розуміння ключових способів інтеграції, обробки, зберігання великих даних
- вміння працювати з компонентами екосистеми Hadoop, розподіленими сховищами і платформами
- практичні навички розробки дата-сервісів, вітрин і додатків
- знання принципів організації моніторингу, оркестрації, тестування
"розробка даних", який:
****
- розгортає, налагоджує і оптимізує інструменти обробки даних
- адаптує датасети для подальшої роботи та аналітики
- створює сервіси, які використовують результати обробки великих обсягів даних
- відповідає за архітектуру даних в компанії
**** <літій>перш ніж потрапити на стіл генерального директора у вигляді квартального звіту або індивідуальною добіркою книг в емейл-розсилці, дані проробляють тривалий і складний, повний перетворень і трансформацій, шлях, що вимагає безперервного моніторингу та оркестрації.
- У цьому ключі команда інженерів, яка готова забезпечити безперервну поставку достовірної інформації для всіх бізнес-споживачів і функцій відіграє найважливішу роль у прийнятті тактичних і стратегічних рішень всієї компанії.
- Робота інженерів даних, зовні непомітна, дивно складна і цікава за своєю специфікою. Неймовірна кількість закономірностей і зв'язків, інструментів і підходів, параметрів і налаштувань не залишать байдужим жоден допитливий розум в пошуках оптимальних і елегантних рішень.
- Черги повідомлень
- DWH-сховища даних
- Сховища NoSQL. Призначення та особливості
- SQL доступ до даних. Вулик Apache
- Платформа злиття
- Elasticsearch
- Apache Spark **********
https://privatelink.de/?https://otus.ru/lessons/data-engineer