본문 바로가기
반응형

Big Data18

[Kibana] 실행 Kibana를 실행해봅니다. 0. 준비하기 1) Kibana를 설치합니다. https://dogf.tistory.com/61 [kibana] 설치 Kibana 설치 방법에 대해 알아봅니다. Elastic의 데이터 시각화 도구 Kibana를 설치하는 방법을 알려드리겠습니다. 다운로드 링크 접속 > 파일 다운로드 > 압축해제 (끝) 먼저, Kibana 설치 경로로 들어갑 dogf.tistory.com 2) Kibana는 단독으로 실행될 수 없습니다. 그래서, ElasticSearch를 실행한 후 아래 내용을 진행해야합니다. https://dogf.tistory.com/83 [ElasticSearch] 실행 ElasticSearch를 실행해봅니다. 설치방법은 아래있습니다. 더보기 https://dogf.tis.. 2021. 7. 5.
[ElasticSearch] 실행 ElasticSearch를 실행해봅니다. 설치방법은 아래있습니다. 더보기 https://dogf.tistory.com/60 [ElasticSearch] 설치 Elastic의 검색엔진 ElasticSearch를 설치하는 방법을 알려드리겠습니다. 다운로드 링크 접속 > 파일 다운로드 > 압축해제 (끝) 먼저, ElasticSearch 설치 경로로 들어갑니다. https://www.elastic.co/kr/download.. dogf.tistory.com 1. 실행하기 ElasticSearch 설치 경로/bin 디렉터리에 "elasticsearch.bat" 파일을 실행시키거나, 명령 프롬프트 창을 열어 다음과 같이 설치 디렉터리에 이동해 명령어를 칩니다. //설치 디렉터리 이동 후 (저는 cd C:\elast.. 2021. 7. 5.
[Logstash] CSV 파일 데이터 수집하기 Logstash를 활용해 CSV 파일을 input 방법에 대해서 알아보도록 하겠습니다. 구축 환경 : windows 10 / RAM 32GB 절차는 다음과 같습니다. 1) conf 파일을 수정하고 > 2) 구동하여 ES에 적재하고 > 3) 데이터가 잘 들어갔는지 확인합니다. 1. conf 파일 수정 conf 파일을 다음과 같이 수정합니다. - 아무 샘플 CSV 파일을 받아 지정 path에 넣고 칼럼명만 아래 배열 형태로 잘 넣어주면 됩니다. # logstash-csv.conf input { file{ # CSV 파일 경로 설정 path => "C:/elastic/logstash-7.6.0/csv/*.csv" start_position => "beginning" } } filter { csv { # 구분자.. 2021. 7. 5.
[Big Data] ELKStack를 활용하여 데이터 파이프라인 구축 Elastic의 ELKStack을 활용하여 데이터 파이프라인 구축하는 방법에 대해 알아봅니다. 내용을 보시기 전, ELKStack과 각 구성요소가 어떤 역할을 하는지 알고 수행하시면 이해에 도움이 됩니다. 이번 내용에서는 ELKStack 실행 > 수집 > 적재 > 조회하는 것이며, 상세히 말씀드리면, 다음과 같습니다. 1) Logstash를 프롬프트로 입력한 데이터를 2) ElasticSearch 적재하고, 3) Kibana를 DevTool을 통해 조회 먼저, ELK Stack 구축을 하기 전 ElasticSearch, Logstash, Kibana를 설치해야 합니다. 설치 방법은 다음과 같습니다. 1. ElasticSearch 설치 글 https://dogf.tistory.com/60?category=.. 2021. 6. 30.
반응형