Blameless Postmortem 체계 구축을 통한 시스템 재발 방지 및 신뢰성 강화
How to Write an Incident Postmortem That Actually Prevents Future Outages
GitHub 장애 - Incomplete pull request results in repositories Incident Report for GitHub
ElasticSearch 인덱스 정합성 결여로 인한 PR 검색 장애 및 Reindex 복구
Incident Commander 도입을 통한 P1 MTTR 67분에서 28분으로 단축
The Incident Commander Role: Running Incidents Without Chaos
Direct-Link 구조를 통한 MOS 대시보드 지연 제거 및 P1 대응 효율화
The Oracle MOS Shortcut: A Life-Saver for P1 Issues
3단계 장애 등급 체계 및 서비스별 Uptime 가중치 산정 도입
Bringing more transparency to GitHub’s status page
SRE Attrition 40%에서 8%로 감소시킨 On-call 운영 체계 최적화
On-Call Wellness: Protecting Your Engineers from Burnout
Repeat Incident Rate를 45%에서 12%로 낮춘 Post-Mortem 프로세스 최적화
Post-Mortem Best Practices That Actually Drive Change
Repeat Incident Rate 45%에서 12%로 낮춘 Post-Mortem 체계 설계
Post-Mortem Best Practices That Actually Drive Change
월 장애 복구 시간 14시간에서 45분으로 단축한 Runbook 자동화 전략
Runbook Automation: From 45-Minute Fixes to 90-Second Recoveries
SOC 2 준수를 위한 Operational Truth와 Customer Narrative의 일치 설계
Incident communication, status visibility, and SOC 2
Incident Log를 Semantic Knowledge Graph로 전환한 지식 베이스 구축
Using Graphify to turn Incident Data into a Knowledge Graph
문서 요약을 넘어 자율적 인프라 분석으로, Aurora AI Incident Management
FireHydrant Alternative: Open Source AI Incident Management
Claude code 개발자 Boris Cherny, 소스코드 유출 경위 공개
수동 배포 단계 자동화 미흡으로 Claude 서비스 12시간 장애 발생함
SRE 팀이 월 1,500~5,000달러 이상의 비용을 절감하며 AI 에이전트로 인시던트를 자율 조사하는 오픈소스 대안을 선택하고 있다
Open Source Incident Management: Why It Matters
GitOps 환경에서 사건 대응 중 수동 kubectl 명령어로 인한 클러스터 상태 편차를 5분 내 Git에 커밋하도록 강제해 동기화 손실 방지
A hard-earned rule from incident retrospectives:
Sentry API를 활용한 자동화로 에러 대응 시간을 15분에서 30초로 단축
Sentry Has a Free API: Here's How to Use It for Error Tracking Automation
Slack EngineeringSlack이 Deploy Safety 프로그램으로 변경 유발 장애로 인한 고객 영향 시간을 18개월에 걸쳐 90% 감소
Deploy Safety: Reducing customer impact from change
올리브영 테크블로그올리브영 QA의 AWS Lambda를 통한 On call 도입기
올리브영 QA팀이 AWS Lambda + CloudWatch Logs 트리거 연계로 인시던트 발생 시 슬랙 채널 자동 생성과 동시에 Jira 티켓 생성 및 온콜 웹훅 호출 자동화
올리브영 테크블로그올리브영은 인시던트를 어떻게 관리하고 있는가?
올리브영이 전체 Usecase 작성과 CSP 정의를 통해 누구나 부담 없이 인시던트를 선언하고 Slack 일원화로 빠른 대응 체계 구축