릴리스노트
v3.8
v3.8.2
Global / English
라이브러리 검색
옵션
대소문자 구분
유형
전체
제목
코드
표
그림
본문
서문
법적 고지 사항
사용 대상
매뉴얼 구성
표기 규약
부연 설명 및 지침
개정 이력
1.
개요
1.1
시스템 소개
1.2
Brightics DP 구성 정보
Component Detail
Hardware / Software 논리 구성도
DP Component 별 연계 구성도
2.
설치 준비하기
2.1
설치 환경
O/S
System 요구사양
Server Check List
Service Details
2.2
DP Component의 Port 정보
DP Component 별 사용 Port 및 Load Balancing 정책
주요 Web 정보
2.3
설치 준비사항
OS 및 Brightics Hadoop 설치, 실행유저 권한 확인
설치 파일 준비
2.4
Pre-settings
설치 전 환경 변수 확인
3.
설치하기
3.1
Single Node 설치하기
설치 스크립트 실행하기
설치 모드 선택하기
User Config 변경하기
설치 시작하기
서비스 기동하기
웹 접속 확인하기
HAproxy 설치하기 (선택사항)
HAproxy Logging
haproxy.cfg 초기 세팅하기
SW Component 별 Config 수정하기
3.2
High Availability 환경 설치하기
DP 설치하기
설치 파일 확인하기
설치 스크립트 실행하기
설치 모드 선택하기
User Config 변경하기
PostgreSQL Config 변경하기
설치 시작하기
내장 DB 설치하기
서비스 기동/정지하기
웹 접속 확인하기
Software Component 별 High Availability 환경 구성하기
API Gateway
Pacemaker 설치하기
Cluster Configuration
HAproxy 설치하기 (필수설치)
HAproxy Logging 기능 사용하기
haproxy.cfg 초기 세팅하기
Clusterware(Pacemaker) 와 HAproxy 연계 설정하기
Clusterware 및 HAproxy 정지, 기동하기
PostgreSQL
Path 수정하기
PostgreSQL Config 수정하기
Replication 유저 및 Database 생성하기
repmgr 등록하기
HAporxy 에 PostgreSQL 추가하기
DP Service Metadata Config 변경하기
Zookeeper (필수설치)
ActiveMQ
ActiveMQ 설정 수정하기
DP Service/Nifi 의 ActiveMQ Config 변경하기
MognoDB
MongoDB Replication 설정하기
DP Service의 Config 변경하기
HAproxy에 MongoDB 추가하기
Elasticsearch
Elasticsearch Replication 구성하기
HAproxy 에 Elasticsearch 추가하기
DP Service 의 Elasticsearch Config 변경하기
Nifi (필수설치)
Nifi Clustering 설정하기
HAproxy 에 Nifi 등록하기
DP Service 의 Nifi Config 변경하기
DP (필수설치)
DP jwt key 동기화하기
DP UI
DP SparkShell
DP Service
3.3
Container 설치하기 (Kubernetes)
필요 환경
Brightics-dp Image 정보
Brightics-dp 설치하기
Helm chart 준비하기
Chart 설치하기
Pod 확인하기
Brightics-dp 접속하기 (Ingress)
Brightics-dp Log 확인하기
Brightics-dp 삭제하기
Brightics-dp 설정하기
Parameters(./brightics-dp/values.yaml)
Global Parameters
Component Parameter
Ldk Parameter
PVC 활용 방법 소개
User-Upload
LDK 적용하기
External Jar 추가하기
3.4
DP 삭제하기
설치 삭제 스크립트 수행하기
4.
정상 작동 확인하기
4.1
기본 템플릿 작업 및 Sample 등록하기
템플릿 목록 조회하기
기본 템플릿 등록하기
Sample 작업 수행하기
Batch Sample Job
batch_category 생성하기
sample_ingest feed 생성하기 (Data Ingest Template)
sample_transform feed 생성 (Data Transformation Template)
Stream Sample Job
Stream Category 생성하기
Stream Data Source 생성하기
Stream Feed 생성하기
Stream Feed 실행하기
Sample Kafka 실행 및 Message Sender 실행하기
Stream Dashboard 확인하기
작업 정리하기
4.2
SW Component별 재기동하기
DP 기동/중지/상태 확인하기
Nifi 기동/중지/상태 확인하기
ActiveMQ 기동/중지/상태 확인하기
MongoDB 기동/중지/상태 확인하기
Elasticsearch 기동/중지/상태 확인하기
PostgreSQL 기동/중지/상태 확인하기
Auto Tagging Core 기동/중지/상태 확인하기
ASB 기동/중지/상태 확인하기
Pacemaker Cluster
전체 정지/기동하기
단일 cluster 정지/기동하기
status 확인하기
HAproxy 기동/중지/상태 확인하기
Zookeeper 기동/중지/상태 확인하기
SSSD 기동/중지/상태 확인하기
LDAP 기동/중지/상태 확인하기
5.
추가 기능 설치하기
5.1
Auto Tagging Service
Auto Tagging Service 설치하기
Hive 설정 변경하기
HA 구성하기
HAproxy에 Auto Tagging 등록하기
DP Service에 Auto Tagging HA 설정 변경하기
정지/기동 하기
5.2
ASB 설치하기
필요 환경
설치 파일
ASB 설치하기
ASB 실행하기
DP Service에 설정 추가하기
DP에 Semi-Structured Data Ingest Template 추가하기
설치 확인하기
High Availability 적용하기
HAproxy 등록하기
ASB Service 설정 변경하기
DP Service 설정 변경하기
5.3
데이터 접근제어 기능(Ranger/LDAP) 사용하기
Ranger & Solr 설치하기
Ranger Plugins 설치하기
LDAP, SSSD 설치하기
LDAP 설치하기
SSSD 설치하기
LDAP, Ranger 설정하기
LDAP에 설정 추가하기
Ranger에 설정 추가하기
HDFS 설정하기
Hive Authentication 활성화하기
Nifi 설정하기
DP Service 설정하기
HA 환경에서 LDAP 구성하기
syncprov 설정하기
LDAP HAproxy 등록하기
SSSD Config 수정하기
DP Service Config 수정하기
6.
Brightics Workspace 연계하기 (ML v3.8.1 기준)
6.1
Brightics DP 구성하기
DP Service에 Brightics Workspace 로그인 모듈 활성화하기
DP UI에 Brightics Workspace 로그인 모듈 활성화하기
DP 재시작하기
6.2
Brightics Workspace 설정 추가하기
DP 사용자 추가하기
DP Palette 활성화하기
프로젝트에 CPU, Memory 할당하기
6.3
DP에 Default Project 생성하기 (3.7.X 버전인 경우)
1.
개요
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
3.
설치하기
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
4.
정상 작동 확인하기
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
5.
추가 기능 설치하기
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
6.
Brightics Workspace 연계하기 (ML v3.8.1 기준)
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
제목이 없습니다.
Brightics DP v3.8 설치 매뉴얼