ML 개발자 매뉴얼
DL 개발자 매뉴얼
DP 개발자 매뉴얼
라이브러리 검색
옵션
대소문자 구분
유형
전체
제목
코드
표
그림
본문
서문
법적 고지 사항
사용 대상
매뉴얼 구성
표기 규약
부연 설명 및 지침
개정 이력
1.
개요
1.1
개요 및 활용 목적
1.2
시스템 요구사항
1.3
관련 용어
2.
NiFi Custom Processor 개발하기
2.1
Nifi 주요 속성
2.2
Custom Processor 개발 Tip
2.3
Custom Processor 개발하기
Processor 개발하기
Test Case
Meta 정보 추가하기
3.
NiFi ControllerSerivce 의존성
3.1
Nifi 관련 Controller Service 사용하기
nifi-site-nar
nifi-site-processors
3.2
Kylo 관련 Controller Service 사용하기
nifi-site-nar
nifi-site-processors
4.
NiFi Concurrent Tasks 가이드
4.1
Concurrent Tasks
4.2
Custom Processor 작성시 주의점
4.3
보완점
5.
NiFi Template 개발 예시
5.1
Template 생성
수집 Template 작성하기
데이터소스 연결 및 수집
데이터 전처리
Initialize Feed Parameters
데이터 처리 및 적재
Trigger Cleanup
NiFi Template 등록하기
5.2
Template 예제 (Basic Template)
Nifi Flow 작성하기
GetFile
ConvertCsvToORC
UpdateAttribute
DropTable(ExecuteHQLStatement)
CreateTable(ExecuteHQLStatement)
PutHdfs
AnalyzeTable
Template 등록하기
실행 결과 확인하기
HDFS 확인하기
DP 화면에서 table내용 확인하기
5.3
Template 예제 (Distributed Processing)
Clustering Publish Template
ExecuteSQL
Scheduling : Execution은 Primary node로 설정
Properties
SplitAvro
ConvertAvroToJSON
EvaluateJsonPath
PublishKafka_0_10
Clustering Consume Template for Data Ingest
ConsumeKafka_0_10
5.4
Template에 Job Summary 기능 추가하기
Job Summary Attribute 추가하기
DP의 기본 설정 Attribute 설명하기
Custom Template에 Attribute 적용하기
Job Summary 화면의 Attribute 값 확인 하기
User Define Info 사용
NiFi 예시
화면 예시
6.
Spark Custom Function 개발하기
6.1
개발하기
Data Types
6.2
함수 정의
Tern JSON 파일 작성하기
Spark Conversion String Syntax
함수 라이브러리 추가
6.3
함수 확인하기
7.
REST API 연계 가이드
7.1
REST API 목록
7.2
주요 REST API
Base URL
Category API
Feed & Execution API
Datasource & Catalog API
2.
NiFi Custom Processor 개발하기
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
5.
NiFi Template 개발 예시
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
6.
Spark Custom Function 개발하기
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
Brightics DP v3.9 개발자 매뉴얼
