#에스이의 시간여행

NAS 점검 : 정보조회

ssh service@ xxx.xxx.xxx.xxx "sudo svc_storagecheck -a"

DISK 점검 목적으로 출력

ssh service@xxx.xxx.xxx.xxx "sudo svc_storagecheck -a|egrep 'Slot number|fault LED|spare active|removed|bound assign|rebuilding|equalizing|faulted'"

ssh service@ xxx.xxx.xxx.xxx "sudo svc_storagecheck -a|egrep 'Slot number|bound as hot spare|fault LED|spare active|removed|bound assign|rebuilding|equalizing|faulted'" |more

디스크 상태 확인

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user admin -password password -scope 0 getdisk -state -tla

fault 확인

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user admin -password password -scope 0 faults -list

rg 확인

/opt/Navisphere/bin/naviseccli -h 1 xxx.xxx.xxx.xxx -user admin -password password -scope 0 getrg 0

어레이 확인

/opt/Navisphere/bin/naviseccli -scope 0 -user admin -password password -t 20 -h xxx.xxx.xxx.xxx getall -array

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user admin -password password -scope 0 getlun

opt/Navisphere/bin/naviseccli -User admin -Password password  -Scope 0 -h xxx.xxx.xxx.xxx getcrus -fana

인증서 확인

/opt/Navisphere/bin/naviseccli security -certificate -lis

디스크 상태 확인

uemcli -d xxx.xxx.xxx.xxx -u admin -p password /env/disk show -detail |egrep 'dpe_disk|Health'

fault 확인

uemcli -d xxx.xxx.xxx.xxx -u admin -p password /sys/general healthcheck

파워 상태

uemcli -d xxx.xxx.xxx.xxx -u admin -p password /env/ps show

fc 상태

uemcli -d xxx.xxx.xxx.xxx -u admin -p password  /net/port/fc show -detail

sp 상태

uemcli -d xxx.xxx.xxx.xxx -u admin -p password  /env/sp show -detail

온도 체크

uemcli -d xxx.xxx.xxx.xxx -u admin -p password  /env/dpe show -detail

디스크 상태 확인

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user sysadmin -password password -scope 0 getdisk -state -tla

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user sysadmin -password password  -scope 0 getdisk -all

fault 확인

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user sysadmin -password password  -scope 0 faults -list

rg 확인

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user sysadmin -password password  -scope 0 getrg 0

/opt/Navisphere/bin/naviseccli -h xxx.xxx.xxx.xxx -user sysadmin -password password  -scope 0 getrg 1

어레이 확인

/opt/Navisphere/bin/naviseccli -scope 0 -user sysadmin -password password  -t 20 -h xxx.xxx.xxx.xxx getall -array

/opt/Navisphere/bin/naviseccli -User sysadmin  -Password password  -Scope 0 -h xxx.xxx.xxx.xxx getcrus -fana

인증서 초기화

/opt/Navisphere/bin/naviseccli security -certificate -cleanup

인증서 확인

/opt/Navisphere/bin/naviseccli security -certificate -list

OA를 통해서 VC 접속

connect interconnect bay_number

show status  : 기본 상태

show profile  : 서버 정보(NAG, ENC, FC 상태 및 기타 정보 확인)

show profile *  : 전부확인 또는 프로파일 명 으로 조회 (서버에서 비정상 네트워크 확인 가능, 토대로  uplinkset 에서 사용여부 확인 가능)

show network : 네트워크 확인

show network : 네트워크명칭  : 네트워크 확인(업링크 셋 확인)

show uplinkset : 쉐어드 셋 확인 가능

show uplinkset 셋명  : 셋 그룹 확인 가능

show uplinkport : vc 장비의 uplink 포트 확인

show uplinkport ID(포트명 입력): vc 장비의 uplink 연결 상태 및  스피드 확인 가능

show stackinglink : 확인 만 (없으면 no stacking )

show profile * : 서버 정보(NAG, ENC, FC 상태 및 기타 정보 확인)

show systemlog : 로그 확인 가능

show all : 전체 정보(전체 보기)

show status  : 기본 상태

기본점검

errshow -r  or  errdump : 로그 확인

porterrshow : crc,loss 변화 반복 확인

상태 및 설정 확인

switchshow : switchdomain, switchState, switchDomain, WWN 확인

chassisshow : partnum, serial num

portshow : 포트 상태 : 상세 port wwn 확인, online 상태 확인

errdump : 로그 확인 - 오늘 안봄

psshow : 파워 상태

fanshow : 팬 상태

portperfshow : 포트 속도

sfpshow port_id : sfp 상태 : 광량 확인

alishow : alias 상태

zoneshow : 존 상태

cfgshow : 설정 확인

cfgactvshow : 적용되어 있는 설정 확인

C7000

리눅스 장비에서 ActiveOA SSH 접속

ssh Administrator@ActiveOAIP

HP ENCLOSURE OA 전체로그 수집

show all

HP ENCLOSURE OA UPTIME 체크

show oa uptime

HP ENCLOSURE OA 상태 체크

show oa status all

HP ENCLOSURE OA 네트워크 확인 : 세팅 중인 상태 확인

show oa network all

HP ENCLOSURE 내 서버 리스트 검색 : 실제 리스트 비교

show server list

HP ENCLOSURE 내 세부 모듈의 상태 체크 : 모듈 상태 확인

show server status all

HP ENCLOSURE 내 모듈별 상세 로그 확인

show syslog server all

HP ENCLOSURE 내 스위치 확인 : 실제리스트 비교

show interconnect info all

HP ENCLOSURE 내 스위치 상태 체크 : 상태 확인

show interconnect status all

HP ENCLOSURE 내 팬 상태 체크: 상태 확인

show enclosure fan all

HP ENCLOSURE 내 팬 상태 체크: 상태 확인

show enclosure powersupply all

ssacli 

• 사용용도 및 사용방법

DISK, Array Controller, Cache battery 상태 확인

• Gen : Gen7,8,9 BL460c Gen7,8,9
• OS : CentOS5,6,7(RHEL 동일)

사용 툴 : hpacucli*.rpm 단일 패키지 설치 필요, HPE 다운로드 필요

google에서 (hpacucli-9.20-9.0.i386.rpm or hpssacli-2.40-13.0.x86_64.rpm or ssacli-3.30-14.0.x86_64.rpm) 검색

• 설치 방법

rpm -Uvh ssacli-버전.rpm

• 실행 방법

Array 상태 확인(시기 별로 패키지 명이 바껴서 명령어 만 다르다. ssacli가 Gen9 이 후)

일반적으로 DISK, Array Controller, Cache, Cache Battery 상태 및 펌웨어, 드라이버 확인(구버전의 경우 드라이버 버전이 안나오는 경우 가 있음)

#hpacucli ctrl all show config detail

#hpssacli ctrl all show config detail

#ssacli ctrl all show config detial

다량의 DISK 가 장착되어있고, 위치 확인이 필요할 때 방법(Predictive Failure 상태일 때 LED 없는 경우가 많음)

DISK 정상 유무 및 위치 확인

#hpacucli ctrl all show config

EX1) physicaldrive 1I:1:4 (port 1I:box 1:bay 4, SAS, 300 GB, Failed)

EX2) physicaldrive 1I:1:4 (port 1I:box 1:bay 4, SAS, 300 GB, Predictive Failure)

DISK LED ON 명령어 실행 시 물리적 DISK 에 블루LED ON

#hpacucli

ctrl slot=0 physicaldrive 1I:1:4 modify led=on

DISK LED OFF 명령어 실행 시 물리적 DISK 에 블루LED OFF

ctrl slot=0 physicaldrive 1I:1:4 modify led=off

hp-health 

• 사용용도 및 사용방법

hpasmcli: show server,show dimm, show temp, show powersupply 명령어

IML : hplog -v 등

• Gen : Gen9 및 이전 세대
• OS : RHEL 7 이하 버전
• Download URL : https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX_ea29e2bfee6c4169a1dd365935
• 설치 방법

rpm -Uvh hp-health-버전.rpm

• 실행 방법

hplog -v #iml 로그 확인

hpasmcli 엔터 치고 필요 명령어 치거나 , hpasmcli -s "show server" 처럼 한 줄 명령 가능

AHSdownload 

• 사용용도 : AHS로그 OS 상에서 수집
• Gen : Gen8 & Gen9
• OS : RHEL 5~7
• Download URL : https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX_368e697b23b049b48b13e7e84a#tab-history
• 설치 방법

rpm -Uvh AHSdownload-버전.rpm

• 실행 방법

실행 파일 경로가 alias 등록이 안되어 직접 경로 찾아서 들어가서 하기와 같이 실행

rpm -qs AHSdownload버전명 #설치 경로 찾기

./AHSdownload -h #헬프

./AHSdownload -s 20181213 -e 20181220 #기간 다운

ilorest

• 사용용도 : AHS로그 OS 상에서 수집
• Gen : Changlog 확인 시 ilo4~5 에서 사용가능한 것으로 보임, 개인적으로 Gen10(ilo5)에서만 사용함(https://hewlettpackard.github.io/python-redfish-utility/#version-3-2-2)
• OS : RHEL5~8
• Download URL : https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX_07ec09e5e97a4c468a99d928ff
• 설치 방법

rpm -Uvh ilorest-버전.rpm

• 실행 방법

ilorest serverlogs --selectlog=IEL -f IELlog.txt  #ilo 로그 보기힘들!(띄어쓰기 안됨, 개인적으로 사용 안함)

ilorest serverlogs --selectlog=IML -f IMLlog.txt  #Hplog  보기힘듬! (띄어쓰기 안됨, 개인적으로 사용 안함)

ilorest serverlogs --selectlog=AHS --customiseAHS "from=2019-03-18&&to=2019-03-19" #AHS 다운로드

hponcfg

• 사용용도 : xml 기반 동작, IML, ilolog, 기타 장비 상태 등 상당히 많은 기능을 가지고 있음 ( xml 은 vi 로 생성하거나, 파일 넣어서 사용)
• Gen : ilo3~5 (개인적으로 구장비에서는 hpasmcli 나 hpilo 에서 수집)
• OS : RHEL 5~8
• Download URL : https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX_640d4499d8c64ee79f546d439f#tab3
• 설치 방법

rpm -Uvh hponcfg-버전.rpm

• 실행 방법 (xml 디렉토리로 이동하여 실행)

hponcfg -f Get_IML.xml  #필요한 xml 넣으면되는데, Get 관련만 사용하세요)

• XML 다운로드 주소(XML 버전마다 FiX내용 확인 필요)

https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX_4a0badcbdd5b4c7c8cc5303878

O/S : RHEL7 or CentOS7

H/W : r730

1    DELL 기본 로그 보기 (hplog에 상응하는 dell 로그 수집,OS 에서 가능, clear 가능)

설치 패키지 : OMSA : OM-SrvAdmin-Dell-Web-LX-9.5.0-4063.RHEL7.x86_64_A00.tar.gz

omreport system esmlog

삭제 - omconfig system esmlog action=clear

omreport system alertlog

삭제 - omconfig system alertlog action=clear

2     DELL 분석용 로그 수집(HP의 ahs로그에 상응 하는 DELL 로그 수집,OS 에서 가능

설치 패키지 : OMSA : OM-SrvAdmin-Dell-Web-LX-9.5.0-4063.RHEL7.x86_64_A00.tar.gz

로그 수집

racadm techsupreport collect -t SysInfo,TTYLog

진행률 확인

racadm jobqueue view

다운로드

racadm techsupreport export -f tsr_report.zip

3    Dell 서버 상태 보고(hp의 hpasmcli에 대응)

설치 패키지 : OMSA : OM-SrvAdmin-Dell-Web-LX-9.5.0-4063.RHEL7.x86_64_A00.tar.gz

옵션 확인

omreport -?

[root@asemsa ~]# omreport chassis

Health

Main System Chassis

SEVERITY : COMPONENT

Ok       : Fans

Ok       : Intrusion

Ok       : Memory

Critical : Power Supplies

Ok       : Power Management

Ok       : Processors

Ok       : Temperatures

Ok       : Voltages

Ok       : Hardware Log

Ok       : Batteries

온도 보기

omreport chassis temps

메모리 상태보기

omreport chassis memory

파워 상태 보기

omreport chassis pwrsupplies

팬상태 보기

omreport chassis fans

소비전력 보기

omreport chassis pwrmonitoring

4    DISK 관련 상태 보기 (hp의 hpssacli 에 대응)

설치 패키지 : perc : PERCCLI_D6YWP_7.1327.00_A09_Linux.tar.gz

디스크 상태 확인(status= 정상(Onln) 리빌드(Rbld) (c=controller e=enclosure s=slot)

/opt/MegaRAID/perccli/perccli64 /call/eall/sall show

리빌드진행률

/opt/MegaRAID/perccli/perccli64 /call/eall/sall show rebuild

전체 상태 확인(컨트롤러 상태, 레이드 상태 , BBU 상태)

/opt/MegaRAID/perccli/perccli64 /call show

배터리알람상태

/opt/MegaRAID/perccli/perccli64 /call show batterywarning

5    DELL 서버 인수시험 관련 명령

설치 패키지 : OMSA : OM-SrvAdmin-Dell-Web-LX-9.5.0-4063.RHEL7.x86_64_A00.tar.gz

omreport

서비스태그, 익스프레스 코드 확인(DELL 요청시 반드시 필요)

omreport system summary |egrep 'Chassis Service|Express'

장비명 확인, CPU 확인, 메모리 확인

omreport chassis Processors

omreport system summary |egrep 'Chassis Model|Processor|Total Installed'

각 펌웨어 확인

omreport chassis firmware