[{"id":"IL-0067","title":{"en":"Redis filled its persistent volume, corrupted its append-only file and crash-looped on every restart","ko":"Redis 마스터의 50Mi 영구 볼륨이 가득 차 AOF 가 깨졌고, Redis 파드가 크래시 루프에 빠져 Klamm 운영 서비스가 멈췄다"},"org":"BC Government","org_slug":"bc-government","date":"2025-07-09","severity":"sev1","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0067","shared_components":["persistent-volume"]},{"id":"IL-0085","title":{"en":"A control plane node of Magic Pages' Kubernetes cluster on Hetzner Cloud ran out of memory, the cluster's own calls then used up the Hetzner API rate limit, and all customer websites were down for about 7.5 hours","ko":"Hetzner Cloud 의 k3s 컨트롤 플레인 노드가 메모리 부족으로 꺼진 뒤 클러스터가 Hetzner API 호출 한도를 다 써 버려 모든 고객 사이트가 약 7.5시간 멈췄다."},"org":"Magic Pages","org_slug":"magic-pages","date":"2025-04-14","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0085","shared_components":["persistent-volume"]},{"id":"IL-0232","title":{"en":"Calico pods in the codfw WikiKube cluster hit their resource limits and crash-looped, taking nodes out one by one","ko":"codfw WikiKube 클러스터에서 Calico 구성 요소가 자원 한도에 걸려 calico-node 파드가 하나씩 죽고 노드가 차례로 빠지면서 MediaWiki 지연과 오류가 났다"},"org":"Wikimedia Foundation","org_slug":"wikimedia-foundation","date":"2024-10-09","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0232","shared_components":["helm"]},{"id":"IL-0447","title":{"en":"An every RDS for MySQL instance slowed badly when its gp2 EBS BurstBalance ran out and IOPS fell to the baseline","ko":"RDS MySQL 인스턴스의 EBS BurstBalance 가 바닥나 IOPS 가 기준 성능으로 묶이고 데이터베이스 성능이 크게 떨어졌다"},"org":"every","org_slug":"every","date":"2024-06-24","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0447","shared_components":["block-storage"]},{"id":"IL-0500","title":{"en":"UToronto JupyterHub logins and server starts returned 500 errors when the hub's sqlite database disk filled up","ko":"UToronto JupyterHub 의 데이터베이스 디스크가 가득 차서 로그인과 서버 시작이 500 오류로 실패했다"},"org":"2i2c","org_slug":"2i2c","date":"2022-10-31","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0500","shared_components":["persistent-volume"]},{"id":"IL-0321","title":{"en":"GCP snapshots on all Patroni nodes stalled GitLab.com's primary PostgreSQL disk, Patroni failed over and 5xx spiked","ko":"GitLab.com 의 Patroni 주 데이터베이스 노드가 멈춰 장애 조치가 일어났고 쓰기 요청에서 5xx 오류가 튀었다"},"org":"GitLab","org_slug":"gitlab","date":"2021-01-16","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0321","shared_components":["block-storage"]},{"id":"IL-0401","title":{"en":"Prow jobs on the k8s-prow-build GKE cluster failed and merges stalled as nodes hit IOPS throttling and kernel panics","ko":"Kubernetes 프로젝트의 Prow 빌드 클러스터 노드가 GCP 디스크 IOPS 스로틀링에 걸려 테스트가 이상하게 실패하고 PR 머지가 몇 시간 멈췄다"},"org":"Kubernetes project","org_slug":"kubernetes-project","date":"2019-05-30","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0401","shared_components":["block-storage"]},{"id":"IL-0040","title":{"en":"Parallel Helm installs saturated small gp2 root volumes on a kops cluster and left all three workers NotReady with the kubelet or Docker down","ko":"비운영 쿠버네티스 클러스터에 Helm 차트를 한꺼번에 설치하자 작은 gp2 루트 볼륨의 IOPS 가 바닥나, 워커 노드 세 대에서 kubelet 이나 Docker 가 내려가 세 대 모두 NotReady 가 됐다"},"org":"Saltside","org_slug":"saltside","date":"2017-04-26","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0040","shared_components":["helm"]},{"id":"IL-0468","title":{"en":"New JupyterHub student pods stuck Pending on MaxVolumeCount after a memory limit cut with node size unchanged","ko":"노드당 볼륨 개수 한도에 걸려 새 학생 서버 파드가 Pending 에 머물고 학생들이 500 오류를 받았다"},"org":"UC Berkeley","org_slug":"uc-berkeley","date":"2017-03-20","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0468","shared_components":["block-storage"]},{"id":"IL-0537","title":{"en":"Sakura Cloud host servers repeatedly lost their storage connection, about five minutes per port switchover","ko":"사쿠라 클라우드의 호스트 서버와 스토리지 장치 사이 연결이 몇 달 동안 되풀이해 끊겼다"},"org":"Sakura Internet","org_slug":"sakura-internet","date":"2012-06-25","severity":"unknown","root_cause":"capacity","url":"https://benchlet.com/incidentlib/app/cases/IL-0537","shared_components":["block-storage"]}]