3. Cluster Health Monitor
3.2. CHM 모니터링
3.2.2. oclumon dumpnodeview
oclumon dumpnodeview 를 사용하여 시스템으로부터 로그 정보를 확인
è SYSTEM : CPU Count , CPU 사용량 , Memory 사용량 같은 시스템 metrics 를 나열 è TOP CONSUMERS : 가장 많이 사용하는 프로세스를 나열
è CPUS : 각각 CPU 의 통계를 나열
è PROCESSES : PID, name, thread 수 , 메모리 사용량 과 같은 프로세스 metrics 를 나열 è DEVICES : Disk read,write 속도, I/O 대기시간과 같은 device metrics 를 나열 è NICS : 네트워크 수신 및 전송 속도, 유효한 대역폭 등의 NIC metrics 를 나열 è FILESYSTEM : 이용가능한 공간, 사용량 , 총 Disk 등의 Filesystem metrics 를 나열 è PROTOCOL ERRORS : protocol 에러를 나열
[root@dotang1 ~]# oclumon dumpnodeview -n dotang2 -last "00:10:00" -i 15 ---
Node: dotang2 Clock: '2018-03-21 13.14.05+0900' SerialNo:86107 ---
SYSTEM:
#pcpus: 2 #cores: 2 #vcpus: 4 cpuht: N chipname: Intel(R) Xeon(R) CPU E5-2699 v3 @ 2.30GHz cpuusage: 3.44 cpusystem: 1.18 cpuuser: 2.26 cpunice: 0.00 cpuiowait: 0.05 cpusteal: 0.00 cpuq: 0 physmemfree: 342348 physmemtotal: 8175444 mcache: 4909160 swapfree: 4526972 swaptotal: 5119996 hugepagetotal: 0 hugepagefree:
- 37 –
0 hugepagesize: 2048 ior: 77 iow: 38 ios: 10 swpin: 0 swpout: 0 pgin: 77 pgout: 35 netr: 13.068 netw:
20.021 procs: 405 procsoncpu: 2 #procs_blocked: 0 rtprocs: 20 rtprocsoncpu: N/A #fds: 36672 #sysfdlimit:
6815744 #disks: 16 #nics: 4 loadavg1: 0.14 loadavg5: 0.43 loadavg15: 0.53 nicErrors: 0
TOP CONSUMERS:
topcpu: 'ora_vktm_TANG(29335) 1.79' topprivmem: 'java(28971) 287756' topshm: 'ora_mman_DOTANG2(20286) 653792' topfd: 'ocssd.bin(28494) 305' topthread: 'crsd.bin(28688) 49'
è 2 번 노드에 지난 10 분동안 수집된 정보를 15 초 간격으로 표시
---
Node: dotang1 Clock: '2018-03-21 13.17.45+0900' SerialNo:271887 ---
PROCESS AGGREGATE:
cpuusage[%] privatemem[KB] maxshmem[KB] #threads #fd
#processes category sid
13.33 2958360 460764 72 4378 68 DBBG GOODUS
22.85 7689428 668036 116 5912 112 DBBG DOTANG1
0.00 211264 162952 2 107 2 DBFG DOTANG1
0.00 74176 32652 2 105 2 DBFG GOODUS
18.09 384860 29752 33 2023 31 ASMBG +ASM1
0.00 168928 24276 9 510 9 ASMFG +ASM1
41.90 1913804 118880 397 3113 30 CLUST
3.80 266880 15344 302 1263 203 OTHER
è 범주 별로 출력 (DBBG, DBFG, ASMBG, ASMFG, CLUSTER)
## oclumon dumpnodeview parameter
Parameter Description
-allnodes cluster 에 모든 노드를 보기
-n node1 node2 보기 원하는 노드의 목록을 지정
-last “duration” 마지막 metric 을 검색하기 위해 큰 따옴표 “” 묶어서 사용 ex) “22:00:00”
-s “time_stamp” -e
“time_stamp”
-s 옵션을 사용하여 조회 범위 시작 시간 지정하고 -e 옵션으로 조회 범위 종료 시 간을 지정
ex) “2018-03-20 13:00:00”
-I interval interval 조절
-v 자세한 보기 출력
Parameter Description
-system ,-process, -device, -filesystem, 지정한 각 노드의 내용을 볼 수 있음
- 38 –
-nic, -protoerr, -cpu, -topconsumer-format “format type” legacy, tabular,csv 형식으로 출력 default 포맷은 legacy 가 있는 표형식
-dir directory 지정한 경로에 파일 생성 -append 옵션을 지정하면 현재 파일에 추
가 지정하지 않으면 기존 파일을 덮어 씀.
-procag 집계된 프로세스를 출력
DBBG (DB backgrounds) DBFG (DB foregrounds) CLUST (Cluster)
OTHER (other processes)
-h oclumon dumpnodeview help 를 표시
## oclumon dumpnodeview SYSTEM
[root@dotang1 ~]# oclumon dumpnodeview -format csv -system -dir /oracle
è csv 파일로 생성시 모습
- 39 –
Metric 설명
#pcpus 물리적 CPUs 의 갯수
#vcpus 논리적 계산 단위
cpuht cpu 하이퍼스레딩 활성화 (Y) 비활성화 (N)
chipname cpu vendor 의 이름
cpu 현재 처리 장치 당 평균 CPU 사용률 샘플 간격(%)
cpuq 현재 샘플 간격 내에서 실행 대기열에 대기중인 프로세스
physmemfree free Ram (KB)의 양
physmentotal 사용 가능한 총 RAM (KB) 의 양
mcache 파일 버퍼에 사용된 실제 RAM 크기와 캐시 메모리 (KB)로 사용된 실제 RAM 크기
- 솔라리스는 이용 불가
swapfree swap 사용 가능공간
swaptotal 총 swap 메모리 (KB) hugepagetotal hugepage 전체 사이즈
- 솔라리스 , 윈도우 사용불가 hugepagefree huge page 사용 가능 공간 hugepagesize huge page 의 최소단위
ior 초당 disk read 속도 (KB/초)
iow 초당 disk write 속도 (kb/초)
ios 평균 초당 disk I/O 작업 속도
swpin 평균 swap in rate swpout 평균 swap out rate
pgin 평균 page in rate
pgout 평균 page out rate
- 40 –
netr 네트워크 평균 수신 속도
netw 네트워크 평균 전송 속도
procs 프로세스의 수
procsoncpu cpu 에서 현재 실행중인 프로세스의 수
rtprocs 실시간 프로세스의 수
rtprocsoncpu cpu 에서 실행중인 실시간 프로세스의 수
#fds open 되어 있는 descriptors 의 수
#sysfdlimit 시스템의 file descriptors 제한
#disks disks 의 수
#nics NIC 수
nicErrors 평균 총 네트워크 오류율
## oclumon dumpnodeview PROCESS
Metric 설명
name 실행중인 프로세스 이름
pid os 의 프로세스 id
#procfdlimit 프로세스의 제한 값
- AIX, HP-UX, 윈도우에서 사용 불가 cpuusage cpu 사용률 (%)
privmem 개인 프로세스 메모리 사용률 (KB)
shm shared 메모리 프로세스 사용률(KB)
- AIX,솔라리스, 윈도우 사용불가
#fd 이 프로세스에 의해서 열린 file descriptors 의 수
#threads 프로세스가 만든 threads 의 수
priority 프로세스 우선순위
## oclumon dumpnodeview DEVICE
Metric 설명
ior 평균 disk read 속도
iow 평균 disk write 속도
ios 평균 disk I/O 작업률
qlen wait 상태로 되어 있는 i/o 요청 수
wait i/o 당 평균 대기 시간 (msec)
type SWAP, SYS, OCR, ASM, VOTING, DISK
## oclumon dumpnodeview NICS
Metric 설명
netrr 평균 초당 네트워크 수신속도
- 41 –
netrw 평균 초단 네트워크 전송속도
neteff 평균 유효 대역폭
nicerrors 평균 오류율
pktsin 평균 수신 패킷 속도
pktsout 평균 나가는 패킷 속도
errsin 들어오는 패킷에 대한 평균 오류율
errsout 나가는 패킷에 대한 평균 오류율
indiscarded 들어오는 패킷에 대한 평균 drop 률 outdiscarded 나가는 패킷에 대한 평균 drop 률
inunicast 유니캐스트에 대한 평균 패킷 수신속도
type Public or Private
innonunicast 멀티 캐스트 평균 패킷 수신률
latency 네트워크 인터페이스 카드의 예상 대기 시간
## oclumon dumpnodeview FILESYSTEM
Metric 설명
total 총 공간 (KB)
mount Mount point
type filesystem 타입
used 사용 중인 공간
available 사용 가능한 공간
used% 사용한 공간의 %
ifree% 사용 가능한 공간의 %
## oclumon dumpnodeview CPU
Metric 설명
cpuid 가상 CPU
sys-usage system 공간에서 cpu 사용률 user-usage user 공간에서 cpu 사용률
nice 특정 cpu 에 대한 nic 값
usage 특정 cpu 에 대한 cpu 사용률
iowait i/o 작업의 cpu 대기시간
## oclumon dumpnodeview PROTOCOL (protoerr)
Metric 설명
IPHdrErr 데이터 그램의 IPv4 헤더에 있는 오류로 인해 버려진 입력 데이터그램의 수
IPAddrErr IPv4 주소가 엔티티에서 수신 할 유효한 주소가 아니기 때문에 버려진 입력 데이터 그램의 수
IPUnkProto 성공적으로 수신되었지만 무시된 local 주소에 지정된 데이터그램 수
- 42 –
IPReasFail IPv4 재구성 알고리즘에 의해 감지된 실패한 수 IPFragFail 단편화 실패로 인한 IPv4 폐기된 데이터그램 수
TCPFailedConn TCP 연결이 SYN-SENT 상태 또는 SYN-RCVD 상태에서 CLOSED 상태로 직접 전환 한 횟수와 TCP 연 결이 SYN-SENT 상태 또는 SYN-RCVD 상태에서 LISTEN 상태로 직접 전환 한 횟수 RCVD 상태 TCPEstRst TCP 연결이 Established 상태 또는 CLOSE-Wait 상태에서 Closed 상태로 직접 전환 한 횟수 TCPRetraSeg 재전송 된 총 TCP 세그먼트의 수
UDPUnkPort UDP 데이터그램의 총 수
UDPRcvErr 전송되지 못한 UDP 데이터그램의 수