서비스는 로그인 세션과 운명을 같이한다

서비스는 로그인 세션과 운명을 같이한다 A lifecycle diagram generated by Archify. 01 / 10/8 01:05 → 01:43 세션이 죽기까지 02 / ssh 만 되던 6시간 반 03 / 다시 떴다가 안정 정상 · 9/19 14:52 부터 한 세션 · 10/8 01:05 → 01:43 세션이 죽기까지 · 9/19 14:52 부터 01 정상 9/19 14:52 부터 한 세션 9/19 14:52 부터 큰 도면 읽기 · 01:05 · 태그 2,300개 · 10/8 01:05 → 01:43 세션이 죽기까지 · 01:05 02 큰 도면 읽기 01:05 · 태그 2,300개 01:05 이벤트 루프 멈춤 · 01:14~01:17 · 재시작 · 10/8 01:05 → 01:43 세션이 죽기까지 · 01:14 ~ 01:17 03 이벤트 루프 멈춤 01:14~01:17 · 재시작 01:14 ~ 01:17 화면 서버 사망 · 01:43 · watchdog · 10/8 01:05 → 01:43 세션이 죽기까지 · 01:43 04 화면 서버 사망 01:43 · watchdog 01:43 세션 강제 종료 · 01:43 · 서비스 전부 꺼짐 · 10/8 01:05 → 01:43 세션이 죽기까지 · 01:43 05 세션 강제 종료 01:43 · 서비스 전부 꺼짐 01:43 ssh 만 되는 상태 · 01:43~08:17 · 서비스 0 · ssh 만 되던 6시간 반 · 01:43 ~ 08:17 06 ssh 만 되는 상태 01:43~08:17 · 서비스 0 01:43 ~ 08:17 재부팅 명령 · 08:17 · 사용자 ssh · ssh 만 되던 6시간 반 · 08:17 07 재부팅 명령 08:17 · 사용자 ssh 08:17 1차 복구 · 08:17~08:25 · 자동 로그인 · ssh 만 되던 6시간 반 · 08:17 ~ 08:25 08 1차 복구 08:17~08:25 · 자동 로그인 08:17 ~ 08:25 다시 내려감 · 08:25~08:28 · 종료 멈춤 · 다시 떴다가 안정 · 08:25 ~ 08:28 09 다시 내려감 08:25~08:28 · 종료 멈춤 08:25 ~ 08:28 안정 · 08:30 · 마운트 재시도 · 다시 떴다가 안정 · 08:30 10 안정 08:30 · 마운트 재시도 08:30 큰 일은 맥북에서만 · 안 닿으면 그 밤은 요약만 · 다시 떴다가 안정 · 08:24 이후 커밋 11 큰 일은 맥북에서만 안 닿으면 그 밤은 요약만 08:24 이후 커밋 원인은 추정 Legend 정상 진행 멈춘 상태 안정 고장 사고 뒤 방어

서비스 22개가 세션 하나에

  • • 10/8 오후에 센 맥미니 com.pais.* 는 22개 (사고 당시 개수는 모름)
  • • 로그인 세션이 죽으면 그 안의 서비스가 전부 같이 죽는다

6시간 반

  • • 01:43 세션 종료부터 08:17 재부팅 명령까지 6시간 34분
  • • 명령 08:17 → 안정 08:30, 복구는 약 13분
  • • 도면 일감이 원인이라는 건 추정이고 확정 못 했다

큰 일은 맥북에서만

  • • 도면 한 장이 2,000~2,900초 걸리는 장비 읽기는 맥북으로
  • • 맥북이 안 닿으면 그 밤은 요약만