{"id":"IL-0165","org":"Linode","date":"2023-05-25","docs":[],"title":{"en":"Some LKE users in Frankfurt could not reach their kube-apiservers with kubectl after backend services failed under memory constraints","ko":"프랑크푸르트 LKE 의 백엔드 서비스가 메모리 부족으로 실패해 일부 사용자가 kubectl 로 kube-apiserver 에 접속하지 못했다"},"domain":["kubernetes"],"impact":{"scope":"access to kube-apiservers through kubectl for a portion of LKE users in the Frankfurt data center","users":"a portion of LKE users in the Frankfurt data center","region":"EU-Central (Frankfurt)"},"review":{"written_by":"session","reviewed_at":null,"reviewed_by":null},"lessons":null,"related":[],"sources":[{"url":"https://status.linode.com/incidents/hxxfnyhfprlj","kind":"official-status","license":"unknown","archived":null}],"summary":{"en":"Starting at 14:00 UTC, backend services of the Linode Kubernetes Engine in Frankfurt failed because of memory constraints, and a portion of customers lost access to their kube-apiservers through kubectl. Administrators identified the cause at 14:27 and raised the memory limits at 14:29.\n\nBy 14:34 Linode confirmed a full recovery and that customers could reach their kube-apiservers again. The postmortem says Linode is taking further steps to increase resilience, redundancy and monitoring for the affected LKE components.","ko":"2023-05-25 14:00 UTC 에 Linode 프랑크푸르트 데이터센터에서 백엔드 서비스가 메모리 제약 때문에 실패하기 시작했다. 그 결과 일부 LKE 사용자가 kubectl 로 kube-apiserver 에 접속하지 못했다.\n\n14:27 에 관리자들이 메모리 제약을 원인으로 찾았고, 14:29 에 메모리 한도를 올렸다. 관리자들은 14:34 에 시스템이 완전히 복구되어 고객이 kube-apiserver 에 다시 접근할 수 있는 것을 확인했다. Linode 는 영향받은 LKE 구성 요소의 복원력, 이중화, 모니터링을 늘리겠다고 밝혔다."},"trigger":null,"severity":"unknown","symptoms":["control-plane-unresponsive"],"timeline":{"detected_after":"11m","resolved_after":"34m"},"date_kind":"incident","detection":{"en":"Linode was made aware of the problem at 14:11 UTC; the status page refers to reports of connectivity issues.","ko":"Linode 는 14:11 UTC 에 문제를 알게 되었다. 백엔드 서비스가 실패하기 시작한 지 11분 뒤였다."},"components":["kube-apiserver","memory-limit"],"root_cause":"capacity","remediation":[{"text":{"en":"increased memory limits","ko":"메모리 한도를 올렸다."}}],"action_items":[{"text":{"en":"Increase resilience, redundancy and monitoring for the LKE components affected by the incident","ko":"영향받은 LKE 구성 요소의 복원력, 이중화, 모니터링을 늘린다."}}],"contributing":[],"recurrence_of":null,"symptoms_text":{"en":"At 14:11 UTC on May 25, 2023, Linode learned that part of its LKE users in the Frankfurt data center could not reach their kube-apiservers through kubectl. The status page opened at 14:27 UTC with \"We are investigating reports of connectivity issues with the LKE service within the Frankfurt Datacenter\".","ko":"2023-05-25 14:11 UTC 에 Linode 는 프랑크푸르트 데이터센터의 일부 LKE 사용자가 kubectl 로 자기 kube-apiserver 에 닿지 못한다는 것을 알게 되었다.\n\n14:27 UTC 에 상태 페이지에 프랑크푸르트 데이터센터의 LKE 서비스 연결 문제 보고를 조사하고 있다는 글이 올라왔다. 나중에 확인해 보니 문제는 14:00 에 백엔드 서비스가 실패하면서 시작되었다."},"updated_at":"2026-11-10T00:00:36.936896Z","url":"https://benchlet.com/incidentlib/app/cases/IL-0165","org_slug":"linode"}