• Гость, подпишитесь сейчас

    📥 Наш адрес сайта меняется, чтобы быть в курсе актуального адреса, подпишитесь на телеграм канал «Перейти»
  • Форумы
  • Программирование

Скачать [Stepik] Data Engineering Fast‑Track: Kafka → Airflow → Spark

Описание складчины

Программирование востребовано в веб-разработке, мобильных приложениях, автоматизации и анализе данных. [Stepik] Data Engineering Fast‑Track: Kafka → Airflow → Spark поможет освоить необходимые навыки, а складчина сделает обучение доступнее.

Информация
Цена: 195 РУБ
Организатор: Kail
Записаться в список
Скачать
Скачать
Скачать
Скачать
Kail
Организатор
Организатор
Регистрация
09.04.2020
Сообщения
463 853
Реакции
45 769
Монеты
1 191
Оплачено
0
Баллы
0
02.10.2025
  • #SkladchinaVip
  • #1
[Stepik] Data Engineering Fast‑Track: Kafka → Airflow → Spark
Ссылка на картинку
Практический fast-track по data engineering: за 4–6 недель собираем рабочий конвейер Kafka → Spark → Lakehouse под управлением Airflow. Разберём batch и streaming, окна и watermark, схемы и контракты. Мини‑проекты, Docker Compose, шаблоны DAG и пайплайнов. Курс подойдёт инженерам, аналитикам и тем, кто хочет освоить современные пайплайны данных с уверенным Python.
Чему вы научитесь
  • Проектировать конвейер данных Kafka → Spark → Lakehouse под управлением Airflow.
  • Поднимать локальное окружение через Docker Compose и воспроизводимо деплоить пайплайны.
  • Делать batch и streaming в Spark, настраивать окна и watermark.
  • Читать/писать данные в Parquet и табличные форматы Delta/Iceberg, избегать «small files».
  • Настраивать DAG: расписания, retries, SLA, catchup, datasets.
  • Подключать источники/приёмники через Kafka Connect/Schema Registry, понимать EOS/idempotency.
  • Писать базовые тесты качества данных (freshness/completeness) и алерты по свежести.
  • Выполнять backfill и разруливать инциденты (сломалась схема, отставание потребителей).
Показать больше
 
Зарегистрируйтесь , чтобы посмотреть контент.
airflow kafka stepik конвейер данных
Похожие складчины
Скачать Практикум по Data Engineering: сквозной ETL на Spark + Postgres + Airflow + BI [Дмитрий Кузьмин]
  • Kail
  • 23.02.2026
0
Ответы
0
Просмотры
138
23.02.2026
Kail
Скачать [Stepik] Асинхронные микросервисы с Apache Kafka на Python [Владимир Кириевский]
  • Kail
  • 31.05.2025
  • Python
0
Ответы
0
Просмотры
307
Python 31.05.2025
Kail
Скачать [Stepik] Системный анализ: Асинхронные API и брокеры сообщений. Kafka ,MQ [rly.it]
  • Kail
  • 25.10.2026
0
Ответы
0
Просмотры
51
25.10.2026
Kail
Скачать [Stepik] Apache Iceberg для Data Engineer [Александр Озерцов]
  • Kail
  • 10.04.2026
0
Ответы
0
Просмотры
97
10.04.2026
Kail
Скачать [Stepik] 1С: Система компоновки данных [Василий Еремин]
  • Kail
  • 14.06.2024
  • 1C
0
Ответы
0
Просмотры
870
1C 14.06.2024
Kail
Показать больше складчин

Войдите или зарегистрируйтесь

Вы должны быть авторизованны для просмотра материала

Создать аккаунт

Создать учетную запись займет не больше минуты!

Регистрация

Войти

Уже зарегистрированы? Просто войдите.

Войти
Поделиться:
Facebook Twitter WhatsApp Электронная почта
  • Форумы
  • Программирование
  • Русский (RU)
  • Обратная связь
  • Условия и правила
  • Политика конфиденциальности
  • Помощь
Меню
Войти

Регистрация

  • Форумы
    • Новые сообщения
  • Мои складчины
  • Служба поддержки
  • Новые складчины
    • Новые сообщения
    • Последняя активность
    • Новые оценки тем
  • Как зарегистрироваться?