Код курса.
У каждого курса есть свой уникальный код. Зная этот код вы можете быстро найти курс в форме поиска.
Выберите городМосква
Москва
Алматы
Екатеринбург
Тюмень
Новосибирск
Сочи
Москва
Москва
Алматы
Екатеринбург
Тюмень
Новосибирск
Сочи
Описание
Курс «Эксплуатация Arenadata Streaming (Kafka)» поможет получить практические навыки по развертыванию, администрированию и пост-настройке безопасности кластера Arenadata Streaming
Что представляет собой курс
Четырёхдневный практический курс по администрированию, установке и настройке безопасности кластера Kafka, который направлен на изучение ключевых аспектов работы с платформой Arenadata Streaming, включая принципы обеспечения безопасности потоковых данных.
- подготовке окружения и установке Arenadata Streaming, Arenadata Streaming Control и Arenadata Platform Security;
- архитектуре и инструментам Apache Kafka (Consumers, Producers, Topics, Kafka Cruise Control, Kafka Connect, MirrorMaker, Kafka REST Proxy, ksqlDB);
- Arenadata Streaming Control (ADS Control);
- обеспечению информационной безопасности для кластера Arenadata Streaming с применением инструментов Arenadata Platform Security.
Кому полезен курс
Аудитория курса включает в себя IT-специалистов, которые хотят повысить свою квалификацию в области управления потоковыми данными и обеспечения безопасности кластера Apache Kafka в составе платформы Arenadata Streaming. Курс предназначен для системных администраторов, специалистов по информационной безопасности и разработчиков в области больших данных. Курс будет полезен как для начинающих, так и для опытных специалистов, стремящихся расширить свои знания и умения в области администрирования и обслуживания распределенной системы потоковой обработки данных − Arenadata Streaming.
Необходимая подготовка
Слушателям необходимо обладать следующим уровнем подготовки:
- знания и навыки работы с командами и сервисами Linux-систем (командная строка, файловая система, текстовые редакторы vi, vim, nano и др.);
- опыт работы с SQL.
Ваш результат обучения
Участники получат теоретические знания и практический опыт по:
- подготовке окружения и установке Arenadata Streaming, Arenadata Streaming Control и Arenadata Platform Security;
- архитектуре и инструментам Apache Kafka (Consumers, Producers, Topics, Kafka Cruise Control, Kafka Connect, MirrorMaker, Kafka REST Proxy, ksqlDB);
- Arenadata Streaming Control (ADS Control);
- обеспечению информационной безопасности для кластера Arenadata Streaming с применением инструментов Arenadata Platform Security.
Сертификация
- Слушателям, успешно прошедшим сертификацию, выдается именной вендорский сертификат.
- Слушателям курса предоставляется 2 попытки для прохождения проверки знаний.
Программа курса
Модуль 1
Модуль 2
Модуль 3
Модуль 4
Модуль 5
Модуль 6
Обзор Arenadata Enterprise Data Platform и Arenadata Streaming
- Экосистема EDP: Arenadata Streaming, Arenadata Hyperwave, Arenadata DB, Arenadata QuickMarts, Arenadata Postgres, Arenadata Cluster Manager
- Arenadata Streaming: основные компоненты и назначение (Kafka Broker, Kafka Connect Worker, Kafka REST Proxy, ksqlDB, Schema-Registry, NiFi Registry, NiFi Server, MiNiFi, ZooKeeper)
- Arenadata Streaming Control
- Arenadata Platform Security
Модуль 2
Подготовка окружения и установка ADS: ZooKeeper/KRaft, Apache Kafka, Monitoring, ADS Control
- Планирование кластера
- Настройка параметров окружения:
- Подготовка к установке. Настройка сети и DNS. Монтирование и настройка файловой системы
- Лабораторная работа
- Введение в Arenadata Cluster Manager: основные понятия, компоненты и возможности, развертывание:
- Лабораторная работа (опционально)
- Установка и настройка ADS: планирование и первичная конфигурация кластера, мониторинг, установка Arenadata Streaming, конфигурирование сервисов (ZooKeeper/KRaft, Apache Kafka):
- Лабораторная работа (опционально)
- Мониторинг ADS Prometheus: архитектура сервиса мониторинга. Настройка/добавление JMX-метрик:
- Лабораторная работа (опционально)
- Arenadata Streaming Control (ADS Control): планирование кластера, настройка параметров окружения и установка, обзор UI
Модуль 3
Архитектура и инструменты Apache Kafka
- Базовые концепции и объекты Kafka: Consumers, Producers, Topics, Partitions, Segments, Replication, Offset, Messages, consumer groups, Brokers, Schemas
- Topics Kafka:
- Основные операции (создание, управление, мониторинг, console CLI, partitions, replication, compaction, retension)
- Гарантии надежности Kafka (доставка/потребление)
- ADS Control: базовые операции (View/Produce Messages, Topics, Brokers, Consumer groups)
- Лабораторная работа.
- Контроллер Kafka. ZooKeeper/KRaft
- Producers Kafka:
- Настройка Producers
- Console Producer
- Consumers Kafka:
- Настройка Consumers
- Сonsumer groups, ребалансировка разделов
- Console Consumer
- Изменение параметров компонентов и объектов Kafka:
- ADS Control
- Console CLI
- Лабораторная работа
- Kafka Cruise Control:
- Назначение, архитектура и компоненты (Goals, Monitor, Analyzer, Detector, Metrics)
- Лабораторная работа (опционально)
- Schema Registry:
- Schema compatibility
- Настройка и управление в ADS Control
- Kafka Tiered Storage:
- Основные возможности. Настройка
Модуль 4
Kafka Connect
- Основные понятия, компоненты и инструменты. API. Установка Plugin's Connectors
- FileStream Connectors:
- Лабораторная работа
- Мультикластерные архитектуры (MirrorMaker, Mirror Connectors)
- ADS Control: управление и добавление коннекторов (MirrorCheckpointConnector, MirrorHeartbeatConnector, MirrorSourceConnector, пользовательских, Debezium):
- Mirror Maker connector
- CDC Debezium
- Kafka ADB Connectors
- Лабораторные работы
Модуль 5
Kafka REST Proxy, ksqlDB
- Основные возможности и примеры использования
Модуль 6
Управление информационной безопасностью кластера ADS
- Механизмы аутентификации/авторизации в Kafka. Шифрование. kTLS
- Установка и настройка Arenadata Platform Security (ADPS):
- Основные этапы установки. Подготовка инфраструктуры. Распределение компонент ADPS
- Лабораторная работа
- Керберизация ADS/ADPS/ADS Control с MS Active Directory:
- Лабораторная работа
- Настройка LDAP sync source для Ranger User synchronizer:
- Лабораторная работа
- Настройка LDAP/AD auth для Ranger Admin:
- Лабораторная работа
- Настройка LDAP/AD auth для ADS Control:
- Лабораторная работа
- Настройка network authentication/domain membership для узлов на примере Active Directory (SSSD/realmd):
- Лабораторная работа
- Настройка SSL ADS/ADPS/ADS Control:
- Сертификаты и Центры сертификации
- Шифрование данных. Основные этапы настройки SSL
- Лабораторная работа
- Настройка авторизации:
- Apache Kafka (ACL, Ranger Plugin)
- ADS Control Service (Ranger Plugin)
- Лабораторная работа
! Данный курс может быть заказан согласно 44-ФЗ, 223-ФЗ (закупка, аукцион, запрос котировок, конкурсные процедуры)
Доступные формы обучения
Описание фомата
Дистанционное (онлайн) обучение проводится с применением Системы Дистанционного обучения УЦ Микротест - системы Mirapolis. По форме и содержанию дистанционное обучение полностью совпадает с аналогичными очными курсами.
Занятие длится 8 академических часов в день, стандартное время проведения обучения с 10:00 до 17.00.
Обучение проходит в реальном времени с преподавателем. В процессе обучения вы сможете задавать вопросы – в чате или голосом во время занятия. В зависимости от программы курса, каждому студенту предоставляется доступ к стенду с лабораторными работами. Для закрепления материала курса вам будут доступны записи прошедших вебинаров в вашем личном кабинете в ЛК Mirapolis.
Данный формат обучения позволяет существенно сократить командировочные издержки.
Расписание курса
FAQ
Онлайн обучение реализуется в Системе Дистанционного Обучения УЦ Микротест — Mirapolis и проходит в реальном времени с преподавателем. За несколько дней до начала обучения вы получаете необходимые ссылки для подключения к курсу и доступ к Личному кабинету.
Более подробно вы можете ознакомиться с информацией на странице дистанционного обучения.
Если у вас остались вопросы, то обратитесь к нам любым удобным для вас способом (тел. +7(495) 231-23-51 или training@training-microtest.ru), и мы ответим на все ваши вопросы.
Очное обучение проходит на территории Учебного центра Микротест по адресу: 127083, г. Москва, ул. Мишина, дом 35
За несколько дней до начала обучения участник получает приглашение, в котором указан адрес места проведения и другая полезная информация для обучения.
Если вы не получили приглашение — обратитесь к нам любым удобным для вас способом (тел. +7(495) 231-23-51 или training@training-microtest.ru), и мы ответим на ваши вопросы и продублируем приглашение на вашу почту.
- Обучение проходит в реальном времени с преподавателем, вы можете задавать свои вопросы и разбирать интересные кейсы сразу в процессе обучения.
- Вашу учебную группу будет сопровождать координатор, которому можно задавать организационные вопросы.
- Если вы по каким-то причинам пропустили онлайн-занятие, то все записи будут доступны 24/7 в вашем личном кабинете в Системе Дистанционного Обучения. Также вы можете их использовать для закрепления материала.
- Дополнительно для вашего удобства мы создаем чат в Telegram вашей группы, где вы сможете задавать вопросы преподавателю, координатору и обмениваться опытом с коллегами по обучению.
По итогу прохождения обучения слушатели получают либо Сертификат Учебного центра о прохождении курса, либо Удостоверение о повышении квалификации, зарегистрированное в ФРДО (Федеральный реестр сведений о документах об образовании и (или) о квалификации, документах об обучении).
Помимо этого, по факту прохождения авторизованных курсов вендоров Eltex, PostgresPro, Astra Linux, QTECH, АЭРОДИСК и др. выдается электронный сертификат вендора.
В основном корпусе в Москве по адресу ул. Мишина, дом 35. Рядом муниципальная платная парковка на всех прилегающих улицах.
По поводу остальных филиалов и корпусов — уточняйте информацию у наших менеджеров. Мы постараемся сделать всё возможное для вашего комфортного обучения.
Да, во время занятий для слушателей всегда доступны чай, кофе, печенье и другие снеки на кофе-брейках.
Наш центр работает с корпоративными и частными клиентами. Для каждой категории клиентов мы разработали различные варианты сотрудничества, позволяющие гибко подходить к ценообразованию и вариантам оплаты.
Обо всех специальных условиях читайте в разделе Спецпредложения или обратитесь к нам любым удобным для вас способом (тел. +7(495) 231-23-51 или training@training-microtest.ru)
Также подпишитесь на новости нашего учебного центра, где вы первыми узнаете про интересные предложения от нас.
Не нашли подходящиего курса?
Оставьте заявку на обучение для вашей организации
Почему выбирают обучение у нас
Техническая
экспертиза
экспертиза
Эксперты в обучении:
- Сети передачи данных и связь
- ОС Linux и платформы виртуализации
- Центры обработки данных и СХД
Опытные преподаватели с мультивендорной экспертизой
Расширенный лабораторный полигон для практики
Подготовка ИТ-специалистов по государственным профессиональным стандартам
Образовательный девелопер
Проектирование и реализация мультивендорных образовательных решений, программ «под ключ»
Разработка и реализация технологических решений для оценки компетенций: тесты, лабораторные полигоны и стенды
Большой опыт создания технологических партнерств с ИТ-вендорами, дистрибьюторами и крупными интеграторами
Пул экспертов в управлении образовательными проектами + разработчики, методологи, педагогические дизайнеры
Подпишитесь и будьте в курсе
Информация о новинках, скидках и акциях. Уже более 36 000 подписчиков!
Оставить заявку
Оставить заявку