- mk 업뎃 돌리던 와중에 /
가 꽉 차버림
- migration이 반쯤 된상태에서 오류 -> 오류가 났는데 업뎃 스크립트가 감지를 못해서 런칭되버림
- 인덱스 깨짐
- 인덱스 깨지는 바람에 쿼리가 제대로 안돌아감 -> UNIQUE CONSTRAINT 다깨짐 / 있는 데이터도 쿼리를 못돌려서 접근이 안됨 (일부 유저 로그인 오류)
---
해결
- 일단 DB 덤프
- 인덱스 끄고 중복 감지해서 행 머지하는 스크립트 만듬
- 로컬에서 덤프에다 스크립트 테스트 -> ok
- 프로덕션에서 스크립트 돌리고 REINDEX 다시 돌림
---
현재상황
아직 사소한 몇몇 테이블들 (연합과 관계없는 내부 기능용 테이블 - 차트라던지)은 완벽히 복구되지 않은 상태에요 - 뭔가 수상한 게 있으면 알려주세요
---
재발 방지 플랜
스토리지 용량 모니터링 스크립트 올려 놓을게요