Ksunka132 29 авг 2019 в 15:15

Apache NIFI — Краткий обзор возможностей на практике

6 мин

18K

HabrJava*Groovy & Grails*Apache*Big Data*

Туториал

Комментарии 7

x893 29 авг 2019 в 16:47

Спасибо за статью. Два вопроса:
1. Сколько человек команда?
2. Сколько времени ушло на интеграцию?

Ksunka132 29 авг 2019 в 16:54

Команда из 4 backend разработчиков. Занималась этим одна я. Примерно полторы недели с документацией, ревью и прочей бюрократией.

Wayfarer15 29 авг 2019 в 23:50

Вся эта операция сопровождается довольно продолжительными танцами с бубном, которыми мы не будем в рамках этой статьи заниматься.

Я хотел было написать книжку про эти танцы с бубнами (про программирование процессов для NiFi), но вот не знаю, насколько это вообще кому-то интересно.

Ksunka132 29 авг 2019 в 23:54

Лично мне было бы интересно почитать :) Если не секрет, много времени ушло на изучение и разбор? И какую литературу использовали? Мне понравилась nifi. Много тривиальных процессов позволяет автоматизировать. Притом довольно быстро.

Wayfarer15 29 авг 2019 в 23:59

У меня были несколько специфические задачи (HL7). То, что есть в NiFi by default совсем ни куда не годиться, поэтому я с самого начала делал своё. Это заняло примерно месяц работы с сорцами. Литературы, кроме собственной документации, практически нет или на уровне первых двух дней изучения.

Ksunka132 30 авг 2019 в 00:03

Мне нужно было недавно загнать данные в еластик. У нас версии новые, а в NiFi старые. Пришлось использовать несколько квадратов, делать ненужные конвертации. В итоге получилось. Если интересно в личку напишу как.

velipre_xella 6 мар 2023 в 19:04

Ссылка https://docs.arenadata.io/ads/UserNIFI/index.html пустая.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Показать лучшие за всё время