ПОИСК
Быстрый заказ
ОЦЕНКА КУРСАобщая оценка курса:оценка преподавателя: Хочу скидку |
Предлагаем вам пройти курсы обучения по Apache NiFi. Они рассчитаны на сотрудников ИТ-отделов, специалистов, которые администрируют, настраивают, обеспечивают сопровождение обработки потока данных в Data Lake, организованного на базе NiFi-кластера.
Зачем нужен курс Apache NiFiПлатформа Apache NiFi предназначена для маршрутизации потока, доставки и преобразования сообщений. Она использует графический интерфейс, позволяет управлять потоками информации в режиме реального времени. Это инструмент для распределения данных с открытым кодом. Платформа гарантирует доставку, обеспечивает хранение информации до момента, когда данные будут выгружены в другую систему. Еще одна функция NiFi – предоставление GUI, распределение нагрузки, проектирование потоков. Курсы обучения по NiFi рассчитаны на специалистов с начальным уровнем работы с Hadoop, Unix. Учебная программа состоит из теоретической и практической части. По окончании курсов слушатели смогут применять платформу для решения следующих задач:
Особенности курсаНаш курс по администрированию Apache NiFi нацелен на Data-инженеров, системных администраторов, разработчиков больших систем данных, архитекторов таких систем. Он будет полезен специалистам, которые сопровождают и администрируют потоки данных на платформе Apache NiFi. Учебная программа включает следующие темы:
РАСПИСАНИЕ ЗАНЯТИЙ
|
Содержание курса
1. Введение в Apache NiFi
- Архитектура Hadoop Data Flow
- Архитектура решения и ключевые концепции Apache NiFi:
- FlowFile
- processor
- connector
- FlowFile Repository
- Content Repository
- Provenance Repository
- Data Lineage и Data Provenance ( Data Provenance Events)
- Функционал NiFi по управлению потоком:
- гарантированная доставка
- управление каналом (буферизация, pressure)
- QoS
- версионность
- Установка и настройка кластера Apache NiFi
- Управление кластером NiFi
- Создание NiFi DataFlow
- Добавление процессора, возможности масштабирования, работа с атрибутами и свойствами
- Процессорные группы (Remote Processor Group)
- Использование NiFi шаблонов
- Оптимизация DataFlow
- Инструменты мониторинга и уведомлений NiFi >
- Apache NiFi Registry версионность и поддержка production deployment
- Вертикальное и горизонтальное масштабирование и отказоустойчивость NiFi
- Доступные расширения и готовые «из коробки» процессоры и коннекторы
- Возможности интеграции кластера NiFi (consumer/provider) с Kafka
- Apache Nifi vs. MiniFi
- Интеграция Apache Kafka, NiFi ,MiniFi
- Типовые сценарии/схемы
Слушатели
Специалисты по администрированию и сопровождению потоков данных с использованием Apache NiFi, архитекторы и разработчики.
Предварительная подготовка
- Начальный опыт работы в Unix
- Начальный опыт работы с Hadoop