{"id":"IL-0164","org":"Linode","date":"2022-06-15","docs":[],"title":{"en":"An incremental Linode Kubernetes Engine production update that was missing changes from the previous release made cluster upgrades and node additions fail silently","ko":"이전 릴리스의 변경이 빠진 LKE 운영 업데이트 때문에 클러스터 업그레이드와 노드 추가가 오류 없이 실패했다"},"domain":["kubernetes"],"impact":{"scope":"LKE customers trying to upgrade clusters or add nodes","users":"unknown","region":"LKE in US-East (Newark), US-Central (Dallas), US-West (Fremont), US-Southeast (Atlanta), CA-Central (Toronto), EU-West (London), EU-Central (Frankfurt), AP-South (Singapore), AP-Northeast (Tokyo 2), AP-West (Mumbai), AP-Southeast (Sydney)"},"review":{"written_by":"session","reviewed_at":null,"reviewed_by":null},"lessons":null,"related":[],"sources":[{"url":"https://status.linode.com/incidents/x14hy9s656ww","kind":"official-status","license":"unknown","archived":null}],"summary":{"en":"At about 18:30 UTC on June 15, 2022, Linode pushed an incremental update to LKE production that lacked changes from the previous release. As a result, cluster upgrades and node additions failed silently for customers. Linode added the missing changes to a follow-up update, released at about 21:00 UTC, which resolved the problem, and put additional steps and automation for updates in place.","ko":"2022년 6월 15일 18:30 UTC 무렵 Linode 는 LKE 운영 환경에 증분 업데이트를 배포했다. 이 업데이트에는 이전 릴리스의 변경이 빠져 있었고, 그 때문에 클러스터를 업그레이드하거나 노드를 추가하려던 고객의 작업이 아무 오류 없이 실패했다. 20:26 UTC 에 원인을 찾았다. Linode 는 빠진 변경을 다음 업데이트에 넣어 21:00 UTC 무렵 배포했고, 이 업데이트로 문제가 풀렸다. 그 뒤 업데이트 절차에 단계와 자동화를 더했다."},"trigger":{"en":"An incremental update pushed to the LKE production environment at about 18:30 UTC.","ko":"6월 15일 18:30 UTC 무렵 LKE 운영 환경에 증분 업데이트를 배포했고, 이 업데이트에는 이전 릴리스의 변경이 빠져 있었다."},"severity":"unknown","symptoms":["upgrade-stuck"],"timeline":{"detected_after":"1h24m","resolved_after":"2h30m"},"date_kind":"incident","detection":{"en":"The status page began investigating at 19:54 UTC, 1 hour 24 minutes after the update.","ko":"상태 페이지 첫 공지는 업데이트 배포 약 1시간 24분 뒤인 19:54 UTC 에 올라왔다."},"components":["node-pool"],"root_cause":"deploy-rollout","remediation":[{"text":{"en":"Released a follow-up LKE update at about 21:00 UTC that contained the missing changes","ko":"빠진 변경을 다음 업데이트에 넣어 21:00 UTC 무렵 배포했다."}}],"action_items":[{"text":{"en":"Add steps and automation to the update process","ko":"같은 문제를 막으려고 업데이트 절차에 단계와 자동화를 더했다."}}],"contributing":[],"recurrence_of":null,"symptoms_text":{"en":"From about 18:30 UTC on June 15, 2022, customers of the Linode Kubernetes Engine (LKE) who tried to upgrade a cluster or add nodes saw those operations fail silently, without an error. The status page opened an investigation of an LKE issue at 19:54 UTC, and the affected list covered LKE in eleven regions.","ko":"2022년 6월 15일 18:30 UTC 무렵부터 LKE 고객이 클러스터를 업그레이드하거나 노드를 추가하려 하면 작업이 아무 오류 없이 실패했다. 19:54 UTC 에 상태 페이지에 LKE 문제를 조사 중이라는 공지가 올라왔다. 영향을 받은 곳은 US-East 뉴어크, US-Central 댈러스, US-West 프리몬트, US-Southeast 애틀랜타, CA-Central 토론토, EU-West 런던, EU-Central 프랑크푸르트, AP-South 싱가포르, AP-Northeast 도쿄 2, AP-West 뭄바이, AP-Southeast 시드니 리전의 LKE 였다."},"updated_at":"2026-11-10T00:00:36.899513Z","url":"https://benchlet.com/incidentlib/app/cases/IL-0164","org_slug":"linode"}