
Nifi를 운영하면서 flow.xml.gz으로 인한 재기동 이슈가 많이 발생하였다. 단일 노드에서 Nifi를 사용한다면 해당 이슈가 발생하지 않겠지만 클러스터 환경에서는 flow 변경 시 즉각 동기화가 이루어져야 하는데 여러 요인으로 인해 특정 노드가 동기화되지 못하는 이슈가 있을 수 있다. 문제 발생 시 주로 flow controller와 flow.xml.gz이 다르다는 이유로 재기동 이후에 강제로 셧다운 되는 경우가 많았다. 그래서 도대체 flow.xml.gz 안에 어떠한 내용들이 있길래 차이가 발생하는지 직접 확인해 보았다. flow.xml.gz이란? DFM(DataFlowManger)이 Nifi 사용자 인터페이스 컨버스에 모든 내용을 저장하기 위한 파일 기본적으로 nifi/conf에 디렉터리에 저..
BigData/Nifi
2024. 1. 4. 18:41
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- exporter
- flink
- nifi.flowcontroller.autoResumeState
- prometheus
- Bigdata
- 실시간처리
- java8
- Item Prototypes
- Dataflow
- zabbix
- Federation
- lld
- hadoop
- error
- spark driver
- hdfs
- Nifi Architecture
- flow.xml.gz
- bigdata #data_mesh
- openjdk1.8
- MAT
- namenode
- 설정에러
- Discovery Rule
- Nifi Service
- 빅데이터
- Apache Nifi
- Apache
- OOM
- nifi
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 |
글 보관함