Курс за обучение по Spark Streaming with Python and Kafka

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към разработчици, които желаят да интегрират Apache Kafka със съществуващи бази данни и приложения за обработка, анализ и т.н.

До края на това обучение участниците ще могат:

• Използвайте Kafka Connect, за да поемете големи количества данни от база данни в теми на Kafka.
• Поглъщане на регистрационни данни, генерирани от сървъри на приложения, в темите на Kafka.
• Направете всички събрани данни достъпни за поточно обработване.
• Експортирайте данни от темите на Kafka във вторични системи за съхранение и анализ.

Това водено от инструктор обучение на живо (онлайн или на място) е насочено към инженери, които желаят да използват Confluent (дистрибуция на Kafka), за да изградят и управляват платформа за обработка на данни в реално време за своите приложения.

До края на това обучение участниците ще могат:

Инсталирайте и конфигурирайте Confluent Platform. Използвайте инструментите и услугите за управление на Confluent, за да стартирате Kafka по-лесно. Съхранявайте и обработвайте входящи данни от потока. Оптимизирайте и управлявайте Kafka клъстери. Защитени потоци от данни.

Формат на курса

Интерактивна лекция и дискусия. Много упражнения и практика. Практическо внедряване в лабораторна среда на живо.

Опции за персонализиране на курса

Този курс е базиран на версията с отворен код на Confluent: Confluent Open Source. За да поискате персонализирано обучение за този курс, моля свържете се с нас, за да уговорим.

Apache Kafka е разпределена стрийминг платформа. Той де факто е стандарт за изграждане на тръбопроводи за данни и разрешава много различни случаи на употреба около обработката на данни: може да се използва като опашка от съобщения, разпределен журнал, поточен процесор и т.н.

Ще започнем с някаква теория зад тръбопроводите за данни като цяло, след което ще продължим с фундаменталните концепции зад Кафка. Ще открием и важни компоненти като Kafka Streams и Kafka Connect.

В това водено от инструктор обучение на живо в България (на място или дистанционно), участниците ще се научат как да настройват и интегрират различни Stream Processing рамки със съществуващи системи за съхранение на големи данни и свързани софтуерни приложения и микроуслуги.

До края на това обучение участниците ще могат:

• Инсталирайте и конфигурирайте различни Stream Processing рамки, като Spark Streaming и Kafka Streaming.
• Разберете и изберете най-подходящата рамка за работата.
• Обработване на данни непрекъснато, едновременно и по начин запис по запис.
• Интегрирайте Stream Processing решения със съществуващи бази данни, хранилища за данни, езера от данни и др.
• Интегрирайте най-подходящата библиотека за обработка на потоци с корпоративни приложения и микроуслуги.

Този курс е за корпоративни архитекти, разработчици, системни администратори и всеки, който иска да разбере и използва високопроизводителна система за разпределени съобщения. Ако имате по-специфични изисквания (напр. само от страна на системната администрация), този курс може да бъде пригоден така, че да отговаря по-добре на вашите нужди.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към системни администратори, които желаят да настроят, разположат, управляват и оптимизират Kafka клъстер от корпоративен клас.

До края на това обучение участниците ще могат:

• Настройте и администрирайте Kafka Cluster.
• Оценете предимствата и недостатъците на внедряването на Kafka локално срещу в облака.
• Разположете и наблюдавайте Kafka с помощта на различни инструменти за локална и облачна среда.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към разработчици на средно ниво, които желаят да разработват приложения за големи данни с Apache Kafka.

До края на това обучение участниците ще могат:

Разработете производителите и потребителите на Kafka да изпращат и четат данни от Kafka. Интегрирайте Kafka с външни системи с помощта на Kafka Connect. Пишете стрийминг приложения с Kafka Streams & ksqlDB. Интегрирайте клиентско приложение на Kafka с Confluent Cloud за базирани на облак внедрявания на Kafka. Придобийте практически опит чрез практически упражнения и случаи на използване в реалния свят.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към инженери по данни, учени по данни и програмисти, които желаят да използват Apache Kafka функции в поточно предаване на данни с Python.

До края на това обучение участниците ще могат да използват Apache Kafka за наблюдение и управление на условията в непрекъснати потоци от данни, използвайки Python програмиране.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към разработчици на средно ниво Java, които желаят да интегрират Apache Kafka в своите приложения за надеждни, мащабируеми и високопроизводителни съобщения.

До края на това обучение участниците ще могат:

• Разберете архитектурата и основните компоненти на Kafka.
• Настройте и конфигурирайте клъстер Kafka.
• Произвеждайте и консумирайте съобщения с помощта на Java.
• Внедрете Kafka Streams за обработка на данни в реално време.
• Осигурете толерантност към грешки и мащабируемост в приложенията на Kafka.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към системни администратори на средно ниво, които искат да използват ефективно функциите на Kafka за опашка за съобщения.

До края на това обучение участниците ще могат:

• Разберете възможностите и архитектурата на Kafka за опашка от съобщения.
• Конфигурирайте темите на Kafka за сценарии на опашка за съобщения.
• Произвеждайте и консумирайте съобщения с помощта на Kafka.
• Наблюдавайте и управлявайте Kafka като опашка за съобщения.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към софтуерни тестери, които желаят да приложат мерки за мрежова сигурност в Apache Kafka приложение.

До края на това обучение участниците ще могат:

• Разположете Apache Kafka на облачен сървър.
• Внедрете SSL криптиране, за да предотвратите атаки.
• Добавете ACL удостоверяване за проследяване и контрол на потребителския достъп.
• Уверете се, че надеждните клиенти имат достъп до клъстери Kafka с SSL и SASL удостоверяване.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към разработчици на средно ниво, които желаят да научат основите на Kafka и да го интегрират с Spring Boot.

До края на това обучение участниците ще могат:

• Разберете Кафка и неговата архитектура.
• Научете как да инсталирате, конфигурирате и настройвате основна среда на Kafka.
• Интегрирайте Kafka с Spring Boot.

Kafka Streams е библиотека от страна на клиента за изграждане на приложения и микроуслуги, чиито данни се предават към и от система за съобщения Kafka. Традиционно Apache Kafka разчита на Apache Spark или Apache Storm за обработка на данни между създателите на съобщения и потребителите. Чрез извикване на API на Kafka Streams от приложение, данните могат да се обработват директно в Kafka, заобикаляйки необходимостта от изпращане на данните към отделен клъстер за обработка.

В това водено от инструктор обучение на живо участниците ще се научат как да интегрират Kafka Streams в набор от примерни Java приложения, които предават данни към и от Apache Kafka за обработка на потоци.

До края на това обучение участниците ще могат:

Разберете характеристиките и предимствата на Kafka Streams пред други рамки за обработка на потоци. Обработвайте данни от потоци директно в рамките на Kafka клъстер. Напишете Java или Scala приложение или микроуслуга, която се интегрира с Kafka и Kafka Streams. Напишете кратък код, който трансформира входните Kafka теми в изходни Kafka теми. пакетирайте и внедрите приложението

Публика

Разработчици

Формат на курса

Част лекция, част дискусия, упражнения и тежка практическа практика

Бележки

За да поискате персонализирано обучение за този курс, моля свържете се с нас, за да уговорим

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към системни администратори от ниво начинаещи до средно ниво, които желаят да се научат как ефективно да управляват темите на Kafka за ефективно поточно предаване и обработка на данни.

До края на това обучение участниците ще могат:

• Разберете основите и архитектурата на темата за Кафка.
• Създавайте, конфигурирайте и управлявайте теми на Kafka.
• Наблюдавайте темите на Kafka за здраве, производителност и наличност.
• Приложете мерки за сигурност за темите на Kafka.

Това водено от инструктор обучение на живо в България (онлайн или на място) е насочено към разработчици, които желаят да приложат Apache Kafka поточно обработване без писане на код.

До края на това обучение участниците ще могат:

• Инсталирайте и конфигурирайте Confluent KSQL.
• Настройте тръбопровод за обработка на потоци, като използвате само SQL команди (без Java или Python кодиране).
• Извършвайте филтриране на данни, трансформации, агрегации, обединения, прозорци и сесии изцяло в SQL.
• Проектирайте и разположете интерактивни, непрекъснати заявки за поточно предаване на ETL и анализи в реално време.