공유할 서비스 선택

TECH


TECH

OS [Cluster] RHEL(Centos) 7 Pacemaker GFS2

페이지 정보

작성자 Leesangwoo 아이디로 검색 전체게시물 댓글 0건 조회 7,535회 좋아요 1회 작성일 20-07-02 15:58

본문

1. GFS2 란? 

   - Global File System 2의 약자로 다중 노드 ( 단일도 가능 )에서 mount 하여 동시에 사용 가능합니다. 

   - 각 노드에는 온디스크 데이터의 일부가 들어있는 자체적 페이지 캐시가 존재하며 glocks 라는 잠금 메커니즘을 사용하여 무결성을 관리합니다. 

   - glock 서브시스템은 기본 통신 계층으로 DLM (distributed lock manager)를 사용하여 구현되는 캐시 관리 기능을 제공합니다.

 

 

2. GFS2 환경설정 및 구성

 2.1 GFS2 환경설정 

    1) GFS2 구성에 필요한 패키지 설치

      - yum install gfs2-utils lvm2-cluster 

 

  4b05118419f352d5126d38a58f6258ed_1594353896_2172.JPG4b05118419f352d5126d38a58f6258ed_1594353896_2676.JPG 

 

 

    2) GFS2 설정 파일 생성

      - lvmconf --enable-cluster ( GFS2 base /etc/lvm/lvm.conf 생성 )

      - locking_type = 3 확인 ( GFS2 base로 생성되어서 3인지만 체크합니다 )

      - volume_list = [ "vg_gfs" ] ( GFS 구성하는 VG는 HA-LVM과 다르게 예외 list에 등록해 줍니다 )

  

  4b05118419f352d5126d38a58f6258ed_1594354043_0022.JPG4b05118419f352d5126d38a58f6258ed_1594354043_0622.JPG
 

 

    3) LVM tag 서비스 정지 

       - systemctl stop lvm2-lvmetad.service ( LVM tag로 인한 이슈 발생 방지를 위하여 tag 서비스 정지를 합니다 )

 

 

    4) dlm ( GFS2 lock manager ) 시작 

       - systemctl start dlm

 

 4b05118419f352d5126d38a58f6258ed_1594354081_4381.JPG4b05118419f352d5126d38a58f6258ed_1594354081_4856.JPG 

 

 

 

 

 2.2 GFS2 구성 

    1) pacemaker cluster 구성 및 quirum 정책 freeze로 변경 

       - pcs cluster setup --name gfs_cluster ha1-hb ha2-hb --start

       - pcs property set no-quorum-policy=freeze

 

  4b05118419f352d5126d38a58f6258ed_1594354343_4712.JPG
 

 

    2) quorum 정책 freeze로 변경 되었는지 확인

       - pcs property show  

 

  4b05118419f352d5126d38a58f6258ed_1594354553_641.JPG
 

 

    3) pacemaker dlm과 clvmd 리소스 등록  

       - pcs resource create dlm ocf:pacemaker:controld op monitor interval=30s on-fail=fence clone interleave=ture ordered=true

       - pcs resource create clvmd ocf:heartbeat:clvm op monitor interval=30s on-fail=fence clone interleave=true ordered=true

 

  4b05118419f352d5126d38a58f6258ed_1594354740_3212.JPG
 

  

    4) dlm과 clvmd 리소스 등록 확인 

       - pcs resource show

 

  4b05118419f352d5126d38a58f6258ed_1594354822_5192.JPG
  

 

    5) 리소스 시작 조건 설정 ( 리소스 시작 조건은 dlm 시작 후 clvmd 이어야 합니다 ) 

      - pcs constraint order start dlm-clone then clvmd-clone

      - pcs constraint colocation add clvmd-clone with dlm-clone

 

  4b05118419f352d5126d38a58f6258ed_1594355202_733.JPG
 

 

    6) 리소스 시작 조건 등록 확인 

      - pcs constraint show

 

  4b05118419f352d5126d38a58f6258ed_1594355250_5359.JPG
 

 

 

 2.3 volume 구성

     1) LVM 볼륨 생성 

        - pvcreate /dev/sdb1 ( pv 생성 )

        - vgcreate -Ay -cy vg_gfs /dev/sdb1 ( -A = autobackup, -c = clustered )

        - lvcreate -n lv_gfs -l 100%FREE vg_gfs

          ( 만약 Error locking on node 2: Volume group for uuid not found: 

           dGOqPEX8Q1qA1gFOcb0RRRPMYmB2O6UOcq2baeCNujtxqKAtTHbQZ1dmJP4AT1FM Failed to activate new LV. ) 

           이런 에러가 발생하면 [clvmd -R : 양 노드 ] 후에 재시도 바랍니다.

 

  4b05118419f352d5126d38a58f6258ed_1594355313_4212.JPG
 

 

     2) 만든 LVM volume gfs2로 format 

        - mkfs.gfs2 -j 3 -p lock_dlm -t gfs_cluster:gfs2 /dev/vg_gfs/lv_gfs ( -j = Number of journals [ 접속 가능한 노드 수 + 1 { +1은 권고 사항입니다 } ], 

          -p = Name of the locking protocol, -t = Name of the lock table [ gfs_cluster = cluster 명, gfs2 파일 시스템 이름 ]


  4b05118419f352d5126d38a58f6258ed_1594357968_7043.JPG


      3) 양쪽 노드에 gfs2 볼륨 마운트 폴더 생성

         - mkdir /gfs

 

 

      4) pacemaker에 gfs2 볼륨 리소스 등록 

         - pcs resource create gfs_fs Filesystem device="/dev/vg_gfs/lv_gfs" directory="/gfs" fstype="gfs2" options="noatime" op monitor interval=10s clone interleave=true 

           ( noatime 옵션을 추가하면 atime 을 기록하지 않음 )

 

 

      5) pacemaker에 gfs2 볼륨 리소스 및 mount 확인   

         - pcs resource show

  

4b05118419f352d5126d38a58f6258ed_1594359733_2239.JPG 

 

      6) pacemaker에 clvmd 리소스 다음 gfs2 볼륨 리소스 시작되게 조건 설정 

         - pcs constraint order start clvmd-clone then gfs_fs-clone

         - pcs constraint colocation add gfs_fs-clone with clvmd-clone 

 

  4b05118419f352d5126d38a58f6258ed_1594359515_0949.JPG
 

 

      7) pacemaker constraint 조건 등록 확인 

         - pcs constraint show

 

  4b05118419f352d5126d38a58f6258ed_1594358050_3717.JPG
 

 

      8) gfs2 볼륨 마운트 확인  

         - mount -v 

         - df -hT

 

  4b05118419f352d5126d38a58f6258ed_1594358094_3849.JPG
  4b05118419f352d5126d38a58f6258ed_1594358097_4403.JPG
 

  

      9) 클러스터 재시작 후에도 이슈 없이 잘 되는지 테스트

         - pcs cluster stop --all ( systemctl status dlm 확인 필수 - 클러스터를 내리면 dlm 서비스가 정지 될 수 있다. 만약 정지 되었다면 systemctl start dlm 시작 후에 클러스터 시작 ) 

         - pcs cluster start --all 

         - pcs resource show ( df -hT ) 리소스와 볼륨에 이슈 없는지 확인 

 

  4b05118419f352d5126d38a58f6258ed_1594358274_7961.JPG
 

 

    클러스터 재시작 후에도 양쪽 노드에 마운트 및 동시에 사용이 가능한지 테스트하면 잘 된다.

 

 

댓글목록

등록된 댓글이 없습니다.

TECH 목록
번호 제목 작성자 작성일 조회수
198 OS OSworker 아이디로 검색 전체게시물 03-24 53
RHEL7 to RHEL8 leapp으로 마이그레이션 하는 방법에 대해~

카테고리 : OS

53 0
작성자 : OSworker 24/03/24
197 Middleware 미들웨어 아이디로 검색 전체게시물 03-21 42
(오픈소스 활용-27) Redis Cache 란? 활용방법과 다운로드

카테고리 : Middleware

42 0
작성자 : 미들웨어 24/03/21
196 OS OSworker 아이디로 검색 전체게시물 03-17 68
Convert2RHEL를 사용하여 CentOS 7.9 에서 RHEL7.9로 전환해보겠습니다.

카테고리 : OS

68 0
작성자 : OSworker 24/03/17
195 Middleware 미들웨어 아이디로 검색 전체게시물 03-07 84
(weblogic 활용) WebLogic Kubernetes Toolkit-UI (무료) 설치 및 구성가이드

카테고리 : Middleware

84 0
작성자 : 미들웨어 24/03/07
194 OS OSworker 아이디로 검색 전체게시물 02-28 156
RHEL8부터는 네트워크 본딩을 구성하려면 nmcli 유틸리티를 사용해야 합니다. 레드햇 권고입니다.

카테고리 : OS

156 0
작성자 : OSworker 24/02/28
193 Middleware 미들웨어 아이디로 검색 전체게시물 02-20 201
(AI-2) Chat-GPT 4All - 허깅페이스 & LLM 국내 인기순위 (Open Ko-LLM LeaderBoard)

카테고리 : Middleware

201 0
작성자 : 미들웨어 24/02/20
192 OS OSworker 아이디로 검색 전체게시물 02-19 261
[질문] free 메모리에서 Used가 너무 높게 나오는데, ps 명령어에는 사용율이 없습니다.

카테고리 : OS

261 0
작성자 : OSworker 24/02/19
191 Middleware 미들웨어 아이디로 검색 전체게시물 02-06 259
(AI-1) Chat-GPT 4All - PC 설치 방법

카테고리 : Middleware

259 0
작성자 : 미들웨어 24/02/06
190 OS OSworker 아이디로 검색 전체게시물 02-05 332
1월31일에 발표된 보안취약점 CVE-2024-21626에 대해 알아보겠습니다.

카테고리 : OS

332 0
작성자 : OSworker 24/02/05
189 OS OSworker 아이디로 검색 전체게시물 01-31 316
OS 백업 아직도 3rd part 사용하시나요? 이제는 OS 에 포함된 ReaR 사용해보세요~!

카테고리 : OS

316 0
작성자 : OSworker 24/01/31
Total 198건
게시물 검색

주식회사 클럭스| 대표 : 이찬호| 사업자등록번호 : 107-87-27655
주소 : 서울특별시 영등포구 국회대로 800, 여의도파라곤
E-mail : sales@chlux.co.kr
Copyright © 클럭스 www.chlux.co.kr All rights reserved.
상단으로Top