공유할 서비스 선택

TECH


TECH

Middleware (Monitoring) WAS 오픈소스 모니터링 소개 "Grafana & Prometues을 사용한 모니터링 방법&#…

페이지 정보

작성자 미들웨어 아이디로 검색 전체게시물 댓글 0건 조회 2,922회 좋아요 1회 작성일 20-09-19 12:37

본문

안녕하세요 "미들웨어" 입니다.

 

이번 장에서는  지난번 소개해드린 scouter 외에 실 사용으로 많이 사용하고 있는 오픈소스 툴인 Grafana를 소개해드려 보겠습니다.

Grafana를 사용해서 현장에서는 상당히 많이 사용합니다.

그 이유로는 상용S/W 와는 다르게 범용성과 확장성이 자유롭고, 상황에 따라 워하는 서비스가 다르기 때문에 DB Pool 만 모니터링 하고 싶다던가, 

아니면 Batch process 만 모니터링 하필요한 기능을 구현 가능합니다.  

 

자신이 운영하고 있는 서비스에 원하는 항목만을 모니터링하고자 할때는 Grafana 만큼 괜찮은 모니터링 솔루션도 현재로서는 많지 않습니다.

아래 다운로드 할 수 있는 경로 공유해드리니, 참고해서 설치 해보시고, 해당 가이드 젤 아래 보시면 제가 Grafana & Promoteus 를 접목해서 

Scouter 발생되는 알림에 대해 Slack 로 알람을 전송하고 나아가 이미지까지 inFluxDB를 사용해서 보낼 수 있도록 하는데 성공한 간략 구성도 공유해드립니다.

 

그럼 설명 시작하겠습니다..

 

1. Grafana 모니터링툴 다운로드 경로

https://grafana.com/grafana/ 

e3700dd94fa528962a9ea77eb7a1c58d_1600487085_8469.jpg
 

 

- Grafana 구성 샘플 화면

e3700dd94fa528962a9ea77eb7a1c58d_1600487096_3946.jpg
e3700dd94fa528962a9ea77eb7a1c58d_1600487096_5226.jpg
 위 화면들 처럼 Grafana를 사용해서 서비스항목에 필요한 부분만을 모니터링 할 수 있습니다.

InfuxDB 와 Prometues 오픈소스를 추가로 사용해야 한다는 부분이 다소 낮설고 어려우실 수도 있지만, 현재 트랜드상.. 한번은 도전해보시는 것이 좋을 것 같습니다.

 

 

2. Grafana & Prometues 직접 구성 사례

예로 Grafana 와 Prometues 를 결합하여 제가 직접 구성했던 사례를 설명해드리겠습니다.

일기장 처럼 작성했던 거니 참고해서 읽어봐주세요.

 

이번에 batch cpu monitoring 을 하기 위해 apm을 분석하다보니..

현재 java deamon (instance) 형대의 batch 는 scuter batch로 모니터링이 어느정도 가능하나..

서버 내에 단발성으로 실행되는 batch process 는 모니터링 분석이 안되는 것을 알게되었다.

 

예를들어... A 서버의 CPU가 갑자기 100% 를 쳤고 그에 대한 분석을 하려면 CPU모니터링을 분석할 수 있는 apm을 확인해야 한다.

java instance로 구성되있지 않다보니 일반적으로 사용하는 미들웨어 APM 인 jennifer, scouter 로는 모니터링 자체가 안된다.

서버 cpu를 모니터링 하는 도구로 jabbix 로 cpu 모니터링을 하지만, 서버 cpu가 100% 이고 그건 java process 다.. 이정도로 끝날것이다.

그럼 A 란 서버의 cpu가 100% 를 쳤고 그건 java process 인건 알겠는데.... 그게 어떤 java cpu process 일까???

이건 분석해주는 도구가 마땅히 없다..

그래서 만들어봤다. 

물론.. 100% 오픈소스로 구현했다

 

1. 만든 이유 : 서버 CPU를 잡아먹는 batch process 의 이름을 확인 하고 싶었다.

2. 사용 도구

  • grafana - view 시각화를 위해 구축
  • prometheus - batch cpu process를 모니터링 하기 위해 존재하는 cpu export를 사용하기 위해 사용
  • slack - 이벤트 알람을 받기위해 사용
  • AC3 - 이벤트 알람시 이벤트 발생시 이미지 까지 전송받기 위해 사용할 저장소

3. 내가 만들어본 Grafana 설계 구상도 이다.
여기서 초록색으로 색칠된 부분은 1차 테스트로 진행해봤던거고 알람 + 이미지까지 성공했다.
두번째로 진행한 핑크색 구현부분은 내가 이걸 시작하고 구현하려던 목표인데, 성공 했으니 참고해서 사용하시길 바랍니다.
e3700dd94fa528962a9ea77eb7a1c58d_1600486535_9239.png



 

 

누군가에게는 절실할 수도 있는 batch cpu process 모니터링 입니다. 

저 또한 시행착오를 많이 하면서 구현에 성공했지만, 개념도 없는 상태에서 접근하기란 쉽지 않았습니다.

적은 도움이라도 되기 바라며 제가 구성중인 구성도를 공개해드렸습니다.

 

이번 Grafana 모니터링 가이드는 여기까지 진행하겠습니다. 

보시다 이해 안되시는 부분이 있으시거나 질문이 필요하시면  댓글 남겨주세요.

되도록 빠른 시간안에 답변 드리도록 하겠습니다.

 

 

 

댓글목록

등록된 댓글이 없습니다.

TECH 목록
번호 제목 작성자 작성일 조회수
104 Middleware 미들웨어 아이디로 검색 전체게시물 03-21 38
(오픈소스 활용-27) Redis Cache 란? 활용방법과 다운로드

카테고리 : Middleware

38 0
작성자 : 미들웨어 24/03/21
103 Middleware 미들웨어 아이디로 검색 전체게시물 03-07 81
(weblogic 활용) WebLogic Kubernetes Toolkit-UI (무료) 설치 및 구성가이드

카테고리 : Middleware

81 0
작성자 : 미들웨어 24/03/07
102 Middleware 미들웨어 아이디로 검색 전체게시물 02-20 196
(AI-2) Chat-GPT 4All - 허깅페이스 & LLM 국내 인기순위 (Open Ko-LLM LeaderBoard)

카테고리 : Middleware

196 0
작성자 : 미들웨어 24/02/20
101 Middleware 미들웨어 아이디로 검색 전체게시물 02-06 259
(AI-1) Chat-GPT 4All - PC 설치 방법

카테고리 : Middleware

259 0
작성자 : 미들웨어 24/02/06
100 Middleware 미들웨어 아이디로 검색 전체게시물 01-19 177
(오픈소스 활용-26) scouter 2.22 에서 Weblogic14 모니터링 등록 중 이슈 조치방법

카테고리 : Middleware

177 0
작성자 : 미들웨어 24/01/19
99 Middleware 미들웨어 아이디로 검색 전체게시물 01-06 250
(오픈소스 활용-25) scouter 2.22 에서 JEUS8 모니터링 등록 하는 방법

카테고리 : Middleware

250 0
작성자 : 미들웨어 24/01/06
98 Middleware 미들웨어 아이디로 검색 전체게시물 12-22 224
(오픈소스 활용-24) 리눅스 java, python 우선순위 설정방법 - (update-alternatives 명령어)

카테고리 : Middleware

224 0
작성자 : 미들웨어 23/12/22
97 Middleware 미들웨어 아이디로 검색 전체게시물 12-07 395
(Apache) Apache 2.4.37 & Weblogic-14 연동방법 (mod_wl_24.so 활용)

카테고리 : Middleware

395 0
작성자 : 미들웨어 23/12/07
96 Middleware 미들웨어 아이디로 검색 전체게시물 11-23 685
(Tmax) JEUS 21 다운로드 및 Master 설치 및 기동해보기

카테고리 : Middleware

685 0
작성자 : 미들웨어 23/11/23
95 Middleware 미들웨어 아이디로 검색 전체게시물 11-08 764
(오픈소스 활용-23) (부하테스트 Tool) Jmeter 설치 및 구성 가이드

카테고리 : Middleware

764 0
작성자 : 미들웨어 23/11/08
Total 104건
게시물 검색

주식회사 클럭스| 대표 : 이찬호| 사업자등록번호 : 107-87-27655
주소 : 서울특별시 영등포구 국회대로 800, 여의도파라곤
E-mail : sales@chlux.co.kr
Copyright © 클럭스 www.chlux.co.kr All rights reserved.
상단으로Top