Task #332
완료됨
마일스톤 #83: 서비스 운영 모니터링
인프라 센서 데이터 수신 모니터링(6/24~6/30)
현호 강이(가) 일년 이상 전에 추가함.
일년 이상 전에 수정됨.
설명
- 현장 설치/운영 중인 인프라 센서 상태 모니터링
- 이슈 확인을 통한 빠른 현장 대응을 통해 센서 데이터 수집의 지속성 유지
참여인력¶
24.06.24 08:38 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
- 완료기한을(를) 2024/06/30(으)로 지정되었습니다.
24.06.24 14:28 카이스트 화암생활관 센서 데이터 이상 메일 확인
24.06.24 14:30 카이스트 화암생활관 센서 데이터 정상 메일 확인
데이터 확인 결과,
24.06.24 14:12:44 마지막 데이터 확인
24.06.24 14:31:45 데이터 재 수신 확인됨.
24.06.24 14:40 현재 데이터 수신 정상
24.06.24 18:09 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.25 08:47 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.25 17:46 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.26 16:47 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.27 08:12 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.27 17:44 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.28 07:55 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
24.06.28 03:10 카이스트 화암생활관 센서 데이터 이상 메일 확인
24.06.28 03:12 카이스트 화암생활관 센서 데이터 정상 메일 확인
데이터 확인 결과,
24.06.28 02:55:14 마지막 데이터 확인
24.06.28 03:14:16 데이터 재 수신 확인됨.
24.06.28 07:55 현재 데이터 수신 정상
24.06.29 02:59 카이스트 화암생활관 센서 데이터 이상 메일 확인
24.06.29 03:02 카이스트 화암생활관 센서 데이터 정상 메일 확인
데이터 확인 결과,
24.06.29 02:44:35 마지막 데이터 확인
24.06.29 03:03:34 데이터 재 수신 확인됨.
24.06.29 10:10 현재 데이터 수신 정상
24.06.29 10:10 현재 제천 3개소, 대전 7개소, 안양 1개소 데이터 수신 이상 무!
안양 석수 사이트 센서 이슈 확인되어 공유드립니다.
6/30 오전 1시 센서 비정상 알람 메일
6/30 오전 8시 40분경 알람 메일 확인 및 중은,지호 수석님께 상황 공유
- 센서 데이터 미수신, 게이트웨이 로그 수신
지호 수석님께서 원격 접속 확인, 재부팅 하여 정상 작동 확인.
이슈 정리 (송지호 수석)
- 현상
- 24.06.30 00:50 쯤 부터 센서와의 연결 끊김
- 센서를 재연결 하는 프로세스가 실행되었으나, 정상 접속이 안되는 상황 (access denied)
- 24.06.30 12:30 쯤 원격으로 RPI를 재부팅하기 전까지 위의 상황 지속
- 원인 분석
- 리눅스의 usb device 연결 상태를 확인해 보았을 때, /dev/ttyUSB0 장치가 존재
- 하지만, 해당 장치를 이용하여 센서(STM32)와의 통신이 불가능한 상황
- 해당 장치는 PoE 일 뿐, PoE와 센서(STM32)와의 연결은 정상 작동이 안될수 있음
- 해결 방안
- 향후 대책
- RPI를 원격 재부팅하지 않고, PoE를 재부팅하는 방법?
- STM32에서 연결이 끊긴 이유 확인 및 대응 방안 마련
(* 문제가 생길 경우, 왜 RPI를 자동으로 재부팅하지 않게 하는지?
혹시나 무한 재부팅 이슈에 걸릴 경우 RPI에 부하가 걸려 정상 부팅이 안되는 현상이 있음)
- 진척도을(를) 0에서 100(으)로 변경되었습니다.
내보내기 Atom
PDF