Придбаний [МФТІ] Hadoop Distributed File System (HDFS) 2021 (Олег Івченко)

[Gadzhi]

Переглянути вкладення 24462
​

Освойте основні операції з файловою системою HDFS.

Які перспективи відкривають навички роботи з HDFS:

1. На інтенсиві ви дізнаєтеся про середовище для роботи з великими даними-Apache Hadoop, а також навчитеся працювати з основоположним компонентом фреймворку Apache Hadoop: HDFS.
2. Hadoop Distributed File System (HDFS) – розподілена файлова система, що дозволяє зберігати інформацію практично необмеженого обсягу. HDFS є невід'ємною частиною екосистеми Hadoop, куди входять фреймворки Spark, Hive, HBase та інші. Hadoop Distributed File System активно використовують і інші напрямки Big Data, включаючи підготовку і аналіз даних, а також аналітичні системи на базі алгоритмів машинного навчання (Machine Learning).

Кому буде корисний інтенсив:

1. Тим, хто починає занурюватися в сферу BigData
2. Тим, хто хоче глибше дізнатися внутрішній устрій розподіленої файлової системи HDFS

Після інтенсиву ви будете:

1. Розуміти, навіщо потрібні великі дані (Big Data)
2. Розбиратися, як влаштована HDFS, її складові
3. Знати переваги та недоліки HDFS
4. Вміти записувати і читати дані в/з HDFS
5. Дослідити файлову систему HDFS з точки зору системного адміністратора

Зміст:

1. Навіщо потрібні великі дані
2. Розподілені файлові системи. Файлові системи HDFS. Їх складові. Їх переваги, недоліки і сфера застосування
3. Читання і запис в HDFS
4. HDFS APIs: Web API, shell, Python API.
5. Форма закріплення знань-тестування і виконання домашньої роботи

https://privatelink.de/?https://fpmi-edu.ru/hdfs