Apache NiFi. 28 ноября в лектории Deworkacy
Привет!
Через две недели пройдет наш митап, посвященный Apache NiFi, полезному OpenSource-инструменту по доставке данных. Поговорим о живых кейсах и обсудим различные технические подходы его использования.
Спикеров будет 4, один человек от нас и коллеги по цеху от Центра разработки Тинькофф, ЭР-Телеком и Аренадата Софтвер.
Под катом — список докладов и ссылка на регистрацию.
Как написать свой процессор (19.00 — 19.30)
Владислав Миркос, разработчик Департамента технологий работы с данными, Ростелеком
Владислав работает в Ростелеком 2 года в команде системной разработки хранилища, участвует в реализации проектов доставки данных в хранилище, работал со многими ETL-инструментами.
В своем докладе он расскажет, как начать писать свои процессоры, когда это может понадобиться, и для чего вообще расширять функционал инструментария доставки. На конкретном примере разгребём основные этапы: от идеи до поставки в продакшен.
Путешествия Flow. От разработки до продакшен и обратно (19.30 — 20.00)
Бронислав Житников, ведущий разработчик ООО «Тинькофф Центр Разработки»
Бронислав прошел путь от службы поддержки через системный анализ и тестирования до разработки (включая архитектуру нескольких систем). В Тинькофф уже полтора года, руководит командой разработки механизмов для интеграции внешних данных в Хранилище, сейчас группа носит название NiFi-Core. Пишет на Java, Python и SQL.
Доклад будет о том, как в Центре разработки Тинькофф происходит доставка разработанных процессов до продакшен среды, и как осуществляется доработка процессов. С чего начинали и с какими сложностями столкнулись — и к чему пришли.
Как упростить жизнь разработчикам и инженерам. Разворачиваем Kafka и Nifi в два клика (20.20 — 20.50)
Элла Кургинян, руководитель группы разработки в Аренадата Софтвер
Элла три года работала разработчиком в одном из интеграторов над различными проектами, затем захотелось чего-то вечного и продуктового, и она попала в Аренадата. На текущий момент — руководитель группы разработки Arenadata Streaming Platform, продукта на базе Kafka и Nifi.
Расскажет о том, как можно сэкономить время и силы при развертывании сред для разработки потоков в Nifi и не только. Покажет, как просто администрировать, обновлять и расширять кластера Nifi и Kafka, поделится внутренним roadmap и укажет, куда обращаться с feature-requests.
Использование Apache NiFi в качестве микросервиса (20.50 — 21.20)
Евгений Горячев, архитектор системы рекомендаций интерактивного ТВ, ЭР-Телеком
Занимается интеграцией, разработкой и эксплуатацией системы рекомендаций в течение 3 лет, а также полным циклом проекта, от разработки и оркестрации сервисов до инструментов анализа продуктовой эффективности системы. Использует NiFi не только для ETL, но и в качестве универсального децентрализованного сервиса.
Расскажет о подходе к использованию NiFi как микросервиса для быстрого изготовления и запуска прототипа сервиса с классическими для микросервисов версионированием, Docker-контейнеризацией, доставкой и оркестрацией контейнеров в проде.
Участие бесплатное, страница регистрации вот тут.
28 ноября, стартуем с 18.30.
Москва, Берсеневская набережная, 6 стр 3, Deworkacy, лекторий
