Cisco Catalyst 3650 Flash 장애 진단 및 복구 가이드

source : 점검중

1. Flash 불량의 정의와 영향

C3650 스위치 내부의 NAND Flash(bootflash)가 손상되어 데이터를 읽거나 쓸 수 없는 상태를 의미합니다.

 

Flash에 저장되는 주요 데이터

• IOS-XE 시스템 이미지
• packages.conf (부팅 설정 파일)
• 일부 구성 설정(Config) 및 라이선스 정보

장애 발생 시 현상

Flash가 손상되면 스위치가 부팅 프로세스를 완료하지 못하거나, 운영 중 예상치 못한 시스템 중단이 발생합니다.

---

2. Flash 장애 유형 3가지

유형	상태 설명	복구 가능 여부
논리적 손상	파일 깨짐, Checksum 오류, 설정 파일 누락	복구 가능
파일시스템 손상	Flash 마운트 실패, 파티션 테이블 깨짐	부분 복구 가능 (Format)
물리적 불량	Read-only(읽기 전용) 전환, 쓰기 불가, I/O 에러	복구 불가 (RMA 대상)

---

3. 주요 장애 로그 및 증상

부팅 실패 관련 Log 발생

• Error loading "flash:packages.conf": 부팅 설정 파일을 찾을 수 없거나 읽기 실패
• Error loading flash:image_name: IOS 이미지 손상 또는 누락

반응형

파일시스템 및 하드웨어 이상 Log 발생

• flashfs fsck... 0 files, 1 directories: Flash 내부 데이터 소실
• cf_read_multiple: I/O error: 물리적인 디스크 읽기 오류 발생
• usbflash0: contains unexpected values in partition table: 파티션 정보 파손

치명적 상태 (Read-only) Log 발생

• 파일 복사, 삭제, 포맷 등 모든 '쓰기' 작업이 거부되는 상태이며 하드웨어 수명이 다했을 때 주로 발생합니다.

---

4. Flash 정상 여부 판별 테스트 (5단계)

현장에서 장비를 살릴 수 있는지, 아니면 교체해야 하는지 판단하는 핵심 기준입니다.

1. 기본 인식 확인: switch: dir flash: 명령어로 파일 목록이 나오는지 확인합니다.
2. 읽기 테스트: switch: more flash:packages.conf 명령어로 텍스트가 정상 출력되는지 봅니다.
3. 쓰기 테스트 (중요): USB의 파일을 Flash로 복사해봅니다. (copy usbflash0:test.bin flash:)
4. 삭제 테스트: 복사한 파일을 다시 삭제해봅니다. (delete flash:test.bin)
5. 포맷 테스트: 위 단계들이 실패할 경우 format flash:를 시도합니다. 실패 시 100% 물리 불량입니다.

---

5. 단계별 실무 복구 프로세스

1단계: 상태 점검 및 USB 부팅

• ROMMON 모드(switch: 프롬프트) 진입 확인
• 정상적인 IOS-XE 이미지가 담긴 USB를 삽입합니다.
• boot usbflash0:이미지파일명 명령어로 임시 부팅을 시도합니다.
  • 성공 시: Flash 내부 소프트웨어 문제일 확률이 높습니다.
  • 실패 시: 메인보드 혹은 하드웨어 결함 가능성이 높습니다.

2단계: Flash 초기화 및 재설치

• format flash: 명령어로 파일시스템을 새로 구성합니다.
• copy usbflash0:이미지파일명 flash: 명령어로 이미지를 복사합니다.

3단계: 소프트웨어 설치 및 부팅 설정

• 부팅 후 software install file flash:이미지파일명 new 명령어로 패키지를 설치합니다.
• boot system flash:packages.conf 명령어로 부팅 경로를 지정하고 저장합니다.

---

복구 프로세스를 단계적으로 진행하였지만 복구가 되지 않을 경우에는 RMA(교체)가 필요한 상황

• Flash 쓰기(Write) 작업 시 에러가 발생하는 경우
• Format 명령어가 실패하거나 진행 중 멈추는 경우
• I/O Error 로그가 반복적으로 출력되는 경우
• 모든 복구 시도 후에도 리부팅 루프(Reboot Loop)가 지속되는 경우

최종 요약

C3650 Flash 불량은 부팅 매체 자체의 물리적 손상인 경우가 많습니다. 읽기, 쓰기, 포맷 중 하나라도 정상 동작하지 않는다면 신속히 RMA를 진행하는 것이 실무적으로 가장 효율적인 대응입니다.