1. 로그스태시 - 실시간 파이프라인 기능을 가진 데이터 수집 엔진 - 오픈소스 - 다양한 플러그인 사용 가능 - input, filter, output으로 구성 2. input file input { file { path => "파일경로" start_position => "beginning" } } - file : 원본 데이터 소스를 파일로 지정 - path : 원본 파일의 파일 위치 경로를 입력 - start_position : 파일의 처음부터 데이터로 인식하도록 만듦 3. output elasticsearch output { elasticsearch { hosts => "localhost:9200" index => "test" } } - elasticsearch : 앤드포인트를 엘라스틱서치로 지정 ..
1. 엘라스틱서치 - 아파치 루씬 기반의 자바 오픈소스 분산 검색 엔진 - 많은 데이터를 준실시간으로 저장, 검색 분석 가능 - 오픈소스 - RESTfule API 기반 2. 로그스태시 - 실시간 파이프라인 기능을 가진 데이터 수집엔진 - 오픈소스 - 예를들어 파일, 데이터베이스, 카프카 등에서 데이터를 수집할 수 있음 3. 엘라스틱서치와 RDBMS의 비교 - 엘라스틱서치 : RDBMS - mapping : schema - index : database - type : table - document : row - field : column 4. 키바나 - 데이터를 시각화 및 스택을 관리하고 모니터링 가능 5. 엘라스틱서치 인덱스 - 데이터가 저장되는 공간 - RDBMS의 데이터베이스와 같은 역할 6. 엘..