공유할 서비스 선택

TECH


TECH

Middleware (오픈소스 활용-3) scouter 모니터링 알람 설정 및 튜닝된 jar로 그룹별 slack 알람 보내는 방법

페이지 정보

작성자 미들웨어 아이디로 검색 전체게시물 댓글 0건 조회 4,517회 좋아요 0회 작성일 21-06-07 12:10

본문

안녕하세요. 미들웨어 입니다.

 

scouter를 활용하다 보면 서비스 모니터링을 메신저로 확인하고 싶을경우가 많습니다.

그럴때 scouter 에서 제공되는 slack 모듈을 활용하면 slack 채널별 모니터링 알람을 보낼 수 있습니다.

이번 오픈소스 활용-3 에서는 scouter 알람 발생시 slack로 보내는 방법과 튜닝을 통해 알람 받는 메세지 내용을 수정 할 수 있는 방법에 대해 설명해보겠습니다.

 

 

1. Scouter Alert (slack 연동)

Scouter에서 발생되는 알람은 여러 메신저로 연동해서 사용할  있다.

아래는 slack 연동 방법이며, 에서는 slack 연동해서 알람을 사용하고 있다.

 

(참고) scouter & slack 연동 설정방법

URL : https://github.com/scouter-project/scouter-plugin-server-alert-slack

slack 알람 연동을 위해선 아래 lib 모두  링크에서 다운로드 받은  /server/lib 안에 넣어주고 재시동을 해야 한 .

 9e4c5185ef091d6a471a418b1d82599d_1623040141_1743.png 

 

 

 

2. Scouter Plug-in (Slack 추가)

플러그인 릴리즈 제공하는 파일들을 모두 다운로드 받는다.

예를 들어 slack 플러그인을 설치하려면..

 scouter-server-plugin-alert-slack 릴리즈 페이지에 있는 파일을 모두 다운로드 받는다.

 

https://github.com/scouter-project/scouter-plugin-server-alert-slack/releases/tag/v1.0.0

( 링크에서 scouter-plugin-server-alert-slack-1.0.0.jar 파일은 사용하지 말고 아래 신규 slack 첨부파 일을 다운로드 받은 1.0.1버전을 server/lib  넣어야 한다.)

  

신규 slack : scouter-plugin-server-alert-slack-1.0.1.jar

scouter collector server 설치된 디렉토리 아래의 lib 디렉토리로 받은 파일들을 모두 복사한다.

scouter collector 재기동 한다. 

=> 첨부파일에 넣어뒀습니다. 필요시 다운로드 받아서 사용하세요



3. 사용자 알람 정의 부분 추가

scouter server 사용자 알람 등록

알람은 host알람과 javaee 알람으로 놔뉘고 slack 연동 알람은 javaee  사용가능하다

 9e4c5185ef091d6a471a418b1d82599d_1623040174_5572.png 

 

 

- Scouter => confiqure 알람 설정내용 추가

 9e4c5185ef091d6a471a418b1d82599d_1623040205_0607.png 

 

 

- Thread Hang 현상발생 알람 샘플 내용

String objType = $counter.getObjType(); 

String objName = $counter.getObjName(); int serviceCount = $counter.getIntValue(); if ( serviceCount > 40 ) {

String title = "Thread Hang 현상 발생!!!! 확인 요망"; 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

else if ( objType.equals("qms_adminweb") && serviceCount >= 40 ) 

{ String title = "Thread Hang 현상 발생!!!! 확인 요망";

 

 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

else if ( objType.equals("qms_apiserver") && serviceCount >= 40 

{ String title = "Thread Hang 현상 발생!!!! 확인 요망";

 

 

String message = "Thread Hang 현상 발생!!!! 확인 요망\n";

message += "[serviceCount] " + serviceCount + "\n";

message += "[objType] " + objType + "\n"; message += "[objName] " + objName + "\n";

$counter.fatal(title, message);

}

 

 

- CPU 기본 제공 알림 옵션

Host agent 옵션을 통해 설정할  있습니다.

cpu_alert_enabled : cpu 알림을 활성화하거나 비활성화 합니다.(기본 : true)

cpu_warnig_pct : cpu waring 레벨 알림의 퍼센트입니다.(정수로 설정)

cpu_fatal_pct : cpu fatal 레벨 알림의 퍼센트입니다.(정수로 설정)

cpu_check_period_ms : 어느 기간동안 cpu 체크할지를 지정합니다.

cpu_waring_history, cpu_fatal_history :  레벨에 설정한 값의 초과가 몇회 발생하였을때 알림을 알릴지  설정합니다.

cpu_alert_interval_ms : 설정 시간동안 동일한 알림을 발송하지 않습니다.

 

- Scouter & Slack 연동 후 발생된 알람 예시

[TYPE] : FRONT-API

[NAME] : /app/was/tomcat3 [LEVEL] : FATAL

[TITLE] : Thread Hang 현상 발생!!!! 확인 요망 

[MESSAGE] : Thread Hang 현상 발생!!!! 확인 요망 [serviceCount] 42

[objType] Front-API

[objName] /app/was/tomcat3/Front-API

 

이걸로 이번 가이드는 마무리 지어보겠습니다. 

잘 활용해서 필요한 모니터링을 사용해보세요~

 

 

첨부파일

댓글목록

등록된 댓글이 없습니다.

TECH 목록
번호 제목 작성자 작성일 조회수
254 OS OSworker 아이디로 검색 전체게시물 06-29 31
앞으로 RHEL 에서는 핫(Hot) DR 경우만 유료 라고 합니다~ 웜(Warm), 콜드(Cold)는 무료~!!!

카테고리 : OS

31 0
작성자 : OSworker 25/06/29
253 OS OSworker 아이디로 검색 전체게시물 06-22 79
RHEL 10 에서 pacemaker가 어떤것이 변경되었는지 찾아봤습니다.

카테고리 : OS

79 0
작성자 : OSworker 25/06/22
252 OS OSworker 아이디로 검색 전체게시물 06-10 127
EUS 는 알겠는데 EEUS는 뭔가요? Enhanced Extended Update Support

카테고리 : OS

127 0
작성자 : OSworker 25/06/10
251 OS OSworker 아이디로 검색 전체게시물 05-28 198
RHEL10에 탑재되어있는 RHEL LIGHTSPEED 소개 #RHEL9.6도가능 #RHELAI

카테고리 : OS

198 0
작성자 : OSworker 25/05/28
250 OS OSworker 아이디로 검색 전체게시물 05-23 221
두번째 RHEL10 소개 - RHEL10 Lifecycle 소개 및 News

카테고리 : OS

221 0
작성자 : OSworker 25/05/23
249 OS OSworker 아이디로 검색 전체게시물 05-13 288
드디어 RedHat Enterprise Linux 10이 나왔습니다. #RHEL10

카테고리 : OS

288 0
작성자 : OSworker 25/05/13
248 OS OSworker 아이디로 검색 전체게시물 05-01 325
xsos라고 들어보셨나요? #sosreport

카테고리 : OS

325 0
작성자 : OSworker 25/05/01
247 OS OSworker 아이디로 검색 전체게시물 04-23 457
sarchart 라고 들어보셨나요? sar datat 를 좀더 보기 편하게 만들어줍니다.

카테고리 : OS

457 0
작성자 : OSworker 25/04/23
246 OS OSworker 아이디로 검색 전체게시물 04-16 624
Sosreport 생성시에 OS 의 모든 sar 데이터가 포함되지 않아요. 해결방법은?

카테고리 : OS

624 0
작성자 : OSworker 25/04/16
245 OS OSworker 아이디로 검색 전체게시물 03-29 763
이슈 : sbd watchdog type stonith 사용시 메모리 누수 발생 #RHEL8.10 #RHEL9.4

카테고리 : OS

763 0
작성자 : OSworker 25/03/29
Total 254건
게시물 검색

주식회사 클럭스| 대표 : 이찬호| 사업자등록번호 : 107-87-27655
주소 : 서울특별시 영등포구 국회대로 800, 여의도파라곤
E-mail : sales@chlux.co.kr
Copyright © 클럭스 www.chlux.co.kr All rights reserved.
상단으로Top