← 탐색

태그된 포스트: sre

데브옵스 리얼톡 · ·3분 읽기

커미터당 $10 — GitHub이 코드 품질 시장의 가격을 정했다

어제(7월 20일) GitHub Code Quality가 정식 출시됐다. 프리뷰 기간 동안 10,000개 이상 기업이 써봤고, 이제부터는 활성 커미터당 월 $10에 AI 기능은 사용량 별도 과금이다.

github-code-qualitysonarqubeci-cd
데브옵스 리얼톡 · ·3분 읽기

Flux가 핫픽스를 10분간 무시하던 시절이 끝났다

새벽 3시, PagerDuty가 울린다. 결제 API 5xx 비율 급등.

fluxgitopsreconciliation
데브옵스 리얼톡 · ·3분 읽기

인증서 갱신 크론잡 하나가 14,000개 서비스의 TLS를 날렸다

3월 12일 오후 2시 17분, AWS 3개 리전에서 동시에 5xx 알림이 쏟아지기 시작했다. 원인은 DDoS도 아니고 코드 배포도 아니었다 — cert-manager 크론잡 하나가 Let's Encrypt에 14,000개의 인증서 발급 요청을 90초 만에 쏟아부은 게 전부였다.

cert-managerlets-encryptkubernetes
데브옵스 리얼톡 · ·3분 읽기

빌드 큐에서 40분 기다리는 동안 AI는 PR 3개를 더 만들었다

지난주 슬랙에서 한 DevOps 엔지니어의 한탄을 봤다. "Copilot이 PR을 하루에 35개 쏟아내는데, 러너가 20개 동시밖에 못 돌아서 큐가 계속 밀린다.

ci-cdai-코딩파이프라인
데브옵스 리얼톡 · ·3분 읽기

AI가 토일을 없앤 게 아니라 이사시켰다

새벽 3시, 페이저가 울린다. 달라진 건 한 가지 — 장애를 일으킨 게 사람이 아니라 자동 복구 에이전트다.

sre토일ai자동화
데브옵스 리얼톡 · ·3분 읽기

배포 47번, 롤백 0번 — 파이프라인에 브레이크가 없었다

금요일 오후 4시 47분, 슬랙에 배포 성공 알림이 초단위로 쏟아졌다. "누가 릴리스 브랜치 잘못 건드렸나?

ci-cd배포circuit-breaker
데브옵스 리얼톡 · ·3분 읽기

PR 설명에 한 줄 심었더니 AI 봇이 시크릿을 뱉었다

올해 2월, Cline이라는 AI 코딩 도구의 npm 패키지가 뚫렸다. 공격 벡터는 정교한 제로데이도, 내부자도 아니었다.

prompt-injectionci-cdgithub-actions
데브옵스 리얼톡 · ·3분 읽기

Grafana K8s Helm v4, values.yaml 그대로 넣으면 터진다

올해 4월 Grafana Labs가 Kubernetes 모니터링 Helm 차트 v4를 릴리스했다. 공식 블로그 제목이 "Biggest update ever"인데, 과장이 아니다.

grafanakuberneteshelm
데브옵스 리얼톡 · ·3분 읽기

prevent_destroy = var.is_prod, Terraform이 7년간 거부한 한 줄

금요일 오후 5시, 스테이징 환경 정리하려고 tofu destroy를 쳤는데 프로덕션 RDS가 state에 같이 물려 있었다.

opentofuterraforminfrastructure-as-code
데브옵스 리얼톡 · ·2분 읽기

checkout v7이 포크 PR을 차단한다 — 남은 시간 12일

7월 16일에 CI가 조용히 깨질 수 있다. GitHub가 actions/checkout의 보안 기본값을 바꿨고, 이게 모든 메이저 버전에 백포트된다.

github-actionsci-cd보안
데브옵스 리얼톡 · ·2분 읽기

보안 레이어 4겹 씌웠는데 732바이트에 뚫렸다

지난달 공개된 CVE-2026-31431, 일명 "Copy Fail." 한 달이 지났다.

copyfailcve-2026-31431kubernetes
데브옵스 리얼톡 · ·3분 읽기

ArgoCD v2에서 v3으로 — "돌아가는데 왜 건드리냐"에 대한 답

5월 6일, ArgoCD v3.1이 공식 EOL됐다.

argocdgitopskubernetes
데브옵스 리얼톡 · ·3분 읽기

그라파나 대시보드에 git blame 찍는 시대가 왔다

장애가 터졌는데 대시보드가 깨져 있다. 누가 언제 수정했는지 모른다.

grafanaprometheusobservability-as-code
데브옵스 리얼톡 · ·3분 읽기

K8s 업그레이드에 34일 태우는 팀과 3일 만에 끝내는 팀

deprecated API 경고를 무시해도 당장은 아무 일도 일어나지 않는다. 경고는 조용히 로그에 쌓이고, 클러스터는 잘 돌아가고, 팀은 다른 피처 일감에 바쁘다.

kubernetes업그레이드deprecated-api
데브옵스 리얼톡 · ·3분 읽기

포스트모템이 2주 걸리면 그건 고고학이다

장애가 터지면 다들 영웅이 된다. Slack에 불 이모지가 날아다니고, 핫픽스 PR이 올라가고, 누군가 "resolved" 상태를 찍으면 팀 채널에 박수 이모지가 쏟아진다.

포스트모템야놀자aiops
데브옵스 리얼톡 · ·3분 읽기

헬스체크는 200인데 응답이 12초 — LLM 추론 서버가 죽는 방식

올해 초 팀에서 vLLM으로 자체 LLM 서빙을 올렸다. Grafana 대시보드는 이미 있었고, Prometheus도 잘 돌고 있었으니 모니터링은 금방이라 생각했다.

vllmprometheusgrafana
데브옵스 리얼톡 · ·3분 읽기

플랫폼 엔지니어링 팀이 생겼는데 온콜은 내가 한다

작년 가을, 우리 팀 리더가 전사 타운홀에서 "Internal Developer Platform을 구축하겠다"고 선언했다. Backstage 기반으로 서비스 카탈로그를 만들고, 셀프서비스 배포를 달고, 개발자 경험을 혁신하겠다고.

platform-engineeringbackstageidp
데브옵스 리얼톡 · ·2분 읽기

SLSA Level 3을 뚫은 웜 — GitHub Actions 공급망의 5월

npm 패키지의 provenance 배지를 확인하고 안심했던 적 있는가? 5월 11일, 그 안심이 환상이었음을 증명한 공격이 터졌다.

github-actionssupply-chainslsa
데브옵스 리얼톡 · ·2분 읽기

AI가 짠 코드, 아마존 주문 630만 건을 날렸다

3월 5일, 아마존 북미 주문량이 99% 증발했다. 장애 원인을 추적한 결과, AI 코딩 도구가 생성한 코드 변경이 지목됐다.

ai아마존장애
데브옵스 리얼톡 · ·3분 읽기

AI 에이전트 13개가 내 온콜을 넘겨받겠다고 한다

새벽 3시, PagerDuty가 울린다. 런북 열고, 대시보드 확인하고, 슬랙에 타임라인 찍고, 롤백 판단하고 — 이 과정을 AI가 전부 해준다면?

aisre온콜
1 / 3 Next →