공유할 서비스 선택

TECH


TECH

Middleware (오픈소스 활용-3) scouter 모니터링 알람 설정 및 튜닝된 jar로 그룹별 slack 알람 보내는 방법

페이지 정보

작성자 미들웨어 아이디로 검색 전체게시물 댓글 0건 조회 2,812회 좋아요 0회 작성일 21-06-07 12:10

본문

안녕하세요. 미들웨어 입니다.

 

scouter를 활용하다 보면 서비스 모니터링을 메신저로 확인하고 싶을경우가 많습니다.

그럴때 scouter 에서 제공되는 slack 모듈을 활용하면 slack 채널별 모니터링 알람을 보낼 수 있습니다.

이번 오픈소스 활용-3 에서는 scouter 알람 발생시 slack로 보내는 방법과 튜닝을 통해 알람 받는 메세지 내용을 수정 할 수 있는 방법에 대해 설명해보겠습니다.

 

 

1. Scouter Alert (slack 연동)

Scouter에서 발생되는 알람은 여러 메신저로 연동해서 사용할  있다.

아래는 slack 연동 방법이며, 에서는 slack 연동해서 알람을 사용하고 있다.

 

(참고) scouter & slack 연동 설정방법

URL : https://github.com/scouter-project/scouter-plugin-server-alert-slack

slack 알람 연동을 위해선 아래 lib 모두  링크에서 다운로드 받은  /server/lib 안에 넣어주고 재시동을 해야 한 .

 9e4c5185ef091d6a471a418b1d82599d_1623040141_1743.png 

 

 

 

2. Scouter Plug-in (Slack 추가)

플러그인 릴리즈 제공하는 파일들을 모두 다운로드 받는다.

예를 들어 slack 플러그인을 설치하려면..

 scouter-server-plugin-alert-slack 릴리즈 페이지에 있는 파일을 모두 다운로드 받는다.

 

https://github.com/scouter-project/scouter-plugin-server-alert-slack/releases/tag/v1.0.0

( 링크에서 scouter-plugin-server-alert-slack-1.0.0.jar 파일은 사용하지 말고 아래 신규 slack 첨부파 일을 다운로드 받은 1.0.1버전을 server/lib  넣어야 한다.)

  

신규 slack : scouter-plugin-server-alert-slack-1.0.1.jar

scouter collector server 설치된 디렉토리 아래의 lib 디렉토리로 받은 파일들을 모두 복사한다.

scouter collector 재기동 한다. 

=> 첨부파일에 넣어뒀습니다. 필요시 다운로드 받아서 사용하세요



3. 사용자 알람 정의 부분 추가

scouter server 사용자 알람 등록

알람은 host알람과 javaee 알람으로 놔뉘고 slack 연동 알람은 javaee  사용가능하다

 9e4c5185ef091d6a471a418b1d82599d_1623040174_5572.png 

 

 

- Scouter => confiqure 알람 설정내용 추가

 9e4c5185ef091d6a471a418b1d82599d_1623040205_0607.png 

 

 

- Thread Hang 현상발생 알람 샘플 내용

String objType = $counter.getObjType(); 

String objName = $counter.getObjName(); int serviceCount = $counter.getIntValue(); if ( serviceCount > 40 ) {

String title = "Thread Hang 현상 발생!!!! 확인 요망"; 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

else if ( objType.equals("qms_adminweb") && serviceCount >= 40 ) 

{ String title = "Thread Hang 현상 발생!!!! 확인 요망";

 

 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

else if ( objType.equals("qms_apiserver") && serviceCount >= 40 

{ String title = "Thread Hang 현상 발생!!!! 확인 요망";

 

 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

}

 

 

- CPU 기본 제공 알림 옵션

Host agent 옵션을 통해 설정할  있습니다.

cpu_alert_enabled : cpu 알림을 활성화하거나 비활성화 합니다.(기본 : true)

cpu_warnig_pct : cpu waring 레벨 알림의 퍼센트입니다.(정수로 설정)

cpu_fatal_pct : cpu fatal 레벨 알림의 퍼센트입니다.(정수로 설정)

cpu_check_period_ms : 어느 기간동안 cpu 체크할지를 지정합니다.

cpu_waring_history, cpu_fatal_history :  레벨에 설정한 값의 초과가 몇회 발생하였을때 알림을 알릴지  설정합니다.

cpu_alert_interval_ms : 설정 시간동안 동일한 알림을 발송하지 않습니다.

 

- Scouter & Slack 연동 후 발생된 알람 예시

[TYPE] : FRONT-API

[NAME] : /app/was/tomcat3 [LEVEL] : FATAL

[TITLE] : Thread Hang 현상 발생!!!! 확인 요망 

[MESSAGE] : Thread Hang 현상 발생!!!! 확인 요망 [serviceCount] 42

[objType] Front-API

[objName] /app/was/tomcat3/Front-API

 

이걸로 이번 가이드는 마무리 지어보겠습니다. 

잘 활용해서 필요한 모니터링을 사용해보세요~

 

 

첨부파일

댓글목록

등록된 댓글이 없습니다.

TECH 목록
번호 제목 작성자 작성일 조회수
46 Middleware 미들웨어 아이디로 검색 전체게시물 11-08 3021
(Tomcat) tomcat 9 스크립트 공유 (setenv.sh / kill.sh / memory_dump.sh / tail.sh / startup.sh / shutdown.sh)

카테고리 : Middleware

3,021 0
작성자 : 미들웨어 21/11/08
45 Middleware 미들웨어 아이디로 검색 전체게시물 10-20 1594
(Kubernetes-5) 신규VM 생성, kubectl 설치 후 접속 방법

카테고리 : Middleware

1,594 0
작성자 : 미들웨어 21/10/20
44 Middleware 미들웨어 아이디로 검색 전체게시물 10-05 1559
(Kubernetes-4) docker 설치 & 삭제하기

카테고리 : Middleware

1,559 0
작성자 : 미들웨어 21/10/05
43 Middleware 미들웨어 아이디로 검색 전체게시물 09-23 1841
(Kubernetes-3) prometheus & Grafana 활용하여 모니터링 구성하기

카테고리 : Middleware

1,841 0
작성자 : 미들웨어 21/09/23
42 Middleware 미들웨어 아이디로 검색 전체게시물 09-06 2689
(Kubernetes-2) 오라클 클라우드로(무료 VM) 쿠버네티스 (OKE) 생성 및 Nginx 기동

카테고리 : Middleware

2,689 0
작성자 : 미들웨어 21/09/06
41 Middleware 미들웨어 아이디로 검색 전체게시물 08-26 2181
(Kubernetes-1) Kubernetes 아키텍처 흐름도 와 개념 정리

카테고리 : Middleware

2,181 0
작성자 : 미들웨어 21/08/26
40 Middleware 미들웨어 아이디로 검색 전체게시물 08-11 2737
(weblogic 활용) 리눅스에 VNC 설치 하여 UI모드로 Weblogic 콘솔모드 접속

카테고리 : Middleware

2,737 0
작성자 : 미들웨어 21/08/11
39 Middleware 미들웨어 아이디로 검색 전체게시물 07-27 5411
(오픈소스 활용-5) SpringBoot 의 장단점 및 소개

카테고리 : Middleware

5,411 0
작성자 : 미들웨어 21/07/27
38 Middleware 미들웨어 아이디로 검색 전체게시물 07-13 2236
(weblogic 활용) weblogic 14 사일런트 모드(-slient)로 설치 해보자

카테고리 : Middleware

2,236 0
작성자 : 미들웨어 21/07/13
37 Middleware 미들웨어 아이디로 검색 전체게시물 06-23 2067
(오픈소스 활용-4) Git가입 -> repogitory 생성 -> Git & Jenkins연동 -> Jenkins & Tomcat build 배포 -> Jenkins pipline 구성 전체 흐름

카테고리 : Middleware

2,067 0
작성자 : 미들웨어 21/06/23
Total 106건
게시물 검색

주식회사 클럭스| 대표 : 이찬호| 사업자등록번호 : 107-87-27655
주소 : 서울특별시 영등포구 국회대로 800, 여의도파라곤
E-mail : sales@chlux.co.kr
Copyright © 클럭스 www.chlux.co.kr All rights reserved.
상단으로Top