TECH

안녕하세요 오늘은 고객으로 부터 온 문의 내용을 공유하고자합니다. 

저희고객분들 Messages Log에 자꾸 과거 로그가 찍히는 문제가 생겨서 문의가왔습니다. 

뭐 과거 로그가 찍히면 뭐가 크게 문제인가 하겠지만, 과거 로그가 찍히면 보통 모니터링 서버에서 반응을 하게 됩니다. 

그래서 현재 이슈로 판단되는 문제가 발생하죠~ 

그럼 어떤 로그가 떴는지 보겠습니다. 

--------------------------------------------------------------

oct 24 10:41:00 server01 kernel: Kernel panic - not syncing: sysrq triggered crash

Nov 21 16:00:39 server01 kernel: loop0: detected capacity change from 0 to 66554432

Nov 21 16:00:39 server01 kernel: FAT-fs (loop0): "fat=16" option is obsolete, not supported now

Nov 22 11:19:28 server01 systemd[1]: Configuration file /etc/systemd/system/secums-agent.service is marked executable. Please remove executable permission bits. Proceeding anyway.

Nov 22 11:19:28 server01 systemd[1]: Configuration file /etc/systemd/system/secums-agent.service is marked world-inaccessible. This has no effect as configuration data is accessible via APIs without restrictions. Proceeding anyway.

............

Nov 22 11:19:28 server01 systemd[1]: Configuration file /usr/lib/systemd/system/ontunev4.service is marked executable. Please remove executable permission bits. Proceeding anyway.

jun 25 12:14:26 server01 chronyd[2444]: Forward time jump detected!

jun 25 12:15:02 server01 chronyd[2444]: System clock was stepped by -0.000000 seconds

jun 25 12:15:35 server01 chronyd[44355]: Could not open command socket on [::1]:323

jun 25 12:15:40 server01 chronyd[44355]: System clock wrong by -388996647.575725 seconds

oct 24 10:25:11 server01 chronyd[44355]: System clock was stepped by -388807746.040237 seconds

oct 24 10:29:53 server01 corosync[7335]:  [KNET  ] host: host: 1 has no active links

--------------------------------------------------------------

그래서 rsylog를 재시작 해보았지만, 동일한 현상이 발생되었습니다. 하지만 유추해볼수있는것은 최근에 서버가 갑자기 리부팅이 되었다고합니다. 

그 이후에 이런 현상이 일어났다고합니다. 

그래서  여기저기서 글을 찾아봤는데 원인을 알만한 글을 찾았습니다. 

"갑작스러운 종료, 시스템 재설정, 예상치 못한 rsyslogd 충돌로 인해 저널 상태 파일이 손상되었습니다." 입니다. 

그럼 여기서 어떻게 이 문제를 해결 할것인지에 대해 고민해봐야합니다. 

저는 이런 현상이 우리 RPM 설치, 업데이트, 지우기등를 자주 하다보면 RPM DB가 깨질때 이와같은 현상이라고 판단되어~

1. rsyslog 업데이트 또는 재 설치

  . 사실 재 설치 보다 업데이트를 하는것이 좋습니다.

   최신 패키지를 사용하는것이 더 좋죠~!!

2. 저널 파일이 손상되었으니 재생성 해주는것입니다. 

# cd /var/lib/rsyslog/

# mv imjournal.state imjournal.state_bak

# ls

imjournal.state_bak

# systemctl restart rsyslog.service

#ls

imjournal.state  imjournal.state_bak

=> 이렇게 하면 단점은 과거 로그는 없어지고 현시점부터 로그가 남겨집니다. 

3. 설정을 변겅하는것인데, 아래 링크에 방법이 나와있습니다.^^

참고링크 : . https://access.redhat.com/solutions/5358591

감사합니다.