day-log

지난주 화요일 새벽 3시 12분. 폰이 울렸다. 결제 서비스에서 upstream timeout이 폭발하고 있다는 페이지. 잠결에 노트북 열었을 때 나는 진짜 결제 API가 죽은 줄 알았다.처음 본 지표Grafana 대시보드를 열어보니 결제 API 자체는 멀쩡했다. P99 레이턴시가 평소 80ms에서 4초로 튀었을 뿐, 컨테이너는 다 살아있고 로그에도 별다른 에러가 없었다. 근데 트래픽은 확실히 흐르지 못하고 있었다. 뭔가 이상해서 istio access log를 뒤져보니 upstream 접속 자체가 안 되는 케이스가 계속 찍히고 있었다.노드 자체 리소스는 여유로웠다. CPU 40%, 메모리는 60%대. 그런데 왜?정신이 살짝 들어서 kube-system 네임스페이스를 봤다. CoreDNS 파드 로그가 도..

여름은 방광에게 가장 힘든 계절입니다. 땀으로 수분이 빠져나가 소변이 진해지고, 더위에 물 대신 커피·맥주·아이스 아메리카노에 손이 가기 쉬우며, 물놀이·에어컨·습한 속옷까지 겹치면 요로 자극과 세균 증식이 동시에 늘어나기 때문이죠. 실제로 방광염(요로감염)은 6~9월에 병원 방문이 가장 많은 계절성 질환 중 하나로, 특히 여성 4명 중 1명은 평생 한 번 이상 경험한다고 알려져 있습니다. 오늘은 여름철 방광을 지키는 생활 습관 7가지를 정리했습니다.Photo by Arnie Watkins on Pexels1. 하루 1.5~2L, '한 번에 벌컥' 대신 '자주 조금씩'여름철 방광 건강의 절반은 물이 결정합니다. 성인은 하루 1.5~2L(체중 kg × 30ml)를 기준으로 잡되, 목이 마를 때 한 번에 5..

OTel Collector 배포할 때 처음에는 다들 하나만 띄우고 시작한다. 우리 팀도 그러다. Deployment 하나 만들어서 어플리케이션들이 다 거기로 OTLP 쏘게. 초기엔 잘 돌아간다. 그러다 트래픽 늘고, tail sampling 붙이고, k8s 노드 라벨을 span에 붙이기 시작하면 슬슬 얘가 무너진다.이번 글은 그 다음 단계 — Agent(DaemonSet) + Gateway(Deployment) 두 층 구조로 가는 실전 셋업이다. 최근 릴리스 몇 개(현재 v0.154 기준)에서 바뀐 것들도 같이 정리한다.왜 두 층인가한 층으로 유지하다 보면 결국 이런 문제가 나온다.첫째, 노드 로컬 정보를 붙이기 어렵다. Pod의 IP는 알지만 노드 이름, 커널 버전, 인스턴스 타입 같은 건 어디선가 리..

기온이 30도를 넘나드는 7월이 되면, 냉장고 문 여닫는 횟수가 부쩍 늘어난다. 문제는 이 시기 냉장고가 가장 혹사당하는 계절이라는 점이다. 문을 자주 열수록 내부 온도가 오르고, 급식·간식·시원한 음료가 뒤죽박죽 섞이면서 정작 필요한 식재료는 안쪽에서 방치되다 상해버린다. 오늘은 여름철 냉장고를 "먹기 좋은 상태"로 유지하기 위한 7가지 실전 정리 팁을 정리했다.Photo by Darrien Staton on Unsplash1. 냉장고 안의 "온도 지도"부터 이해하기같은 냉장고라도 위치마다 실제 온도가 다르다. 일반적으로 문쪽 > 상단 > 중단 > 하단 > 야채칸 순으로 온도가 올라간다. 즉, 문쪽이 가장 따뜻하고 하단이 가장 차갑다는 뜻이다. 이 원칙 하나만 알아도 자리 배치의 절반은 끝난다.문쪽(가..

kubectl이 갑자기 Too Many Requests를 뱉기 시작하면 대부분 첫 반응은 비슷하다. "누가 또 apiserver 두들기고 있냐." 그리고 나서 metrics를 보면 특정 컨트롤러가 리스트 요청을 폭주하고 있거나, 새 오퍼레이터가 배포되면서 watch를 무한 재연결하고 있거나 그런 식이다.근데 그때 이런 의문이 든다. 왜 kubelet의 상태 업데이트는 여전히 잘 되는데 내 kubectl은 막힐까? 왜 어떤 요청은 큐잉되고 어떤 요청은 즉시 429가 뜰까? 이 뒤에는 API Priority and Fairness — 줄여서 APF — 라는 녀석이 돌아가고 있다. 사실 v1.29에서 GA된 지 좀 됐는데, 실제로 이걸 튜닝하거나 내부를 뜯어본 사람은 생각보다 적다. 최근에 EKS 컨트롤 플레..

여름이 되면 다리가 유독 무겁고 저녁 무렵 발등이 두툼하게 부풀어 오르는 분들이 많습니다. 기온이 높아지면 말초 혈관이 확장되고, 오래 서 있거나 앉아 있을 때 정맥이 다리에서 심장으로 혈액을 밀어올리는 능력이 떨어져 체액이 조직 사이에 고이기 때문이에요. 짠 음식, 수분 부족, 꽉 끼는 옷도 여름철 붓기를 부추기는 요인입니다. 오늘은 병원 진료 없이도 오늘 저녁부터 바로 실천할 수 있는 다리 부종 완화 습관 7가지를 정리했습니다.Photo by Lucrezia Carnelos on Unsplash1. 하루 5분, "심장보다 높게" 다리 올리기가장 간단하면서도 효과가 즉각적인 방법입니다. 소파나 벽에 다리를 걸치고 15~20cm 정도 심장보다 높게 올려 5~10분간 유지하면, 다리에 몰려 있던 정맥혈이 ..

지난주 화요일 새벽 4시쯤, 알림이 두 개 연달아 왔다. 하나는 pod pending 알림, 하나는 P99 레이턴시 알림. 눈이 번쩍 떠져서 노트북을 켰다.우리 팀은 몇 달 전부터 Karpenter를 v1.x로 올려두고 spot-to-spot consolidation을 활성화해서 쓰고 있다. 비용은 확실히 줄었다. 근데 그 새벽에는 대가를 치렀다. 노드 12대 중 7대가 30분 사이에 인터럽트를 받으면서 순차적으로 죽었고, 그 와중에 Karpenter는 계속 새 spot을 붙였다 떼기를 반복하고 있었다.처음에는 그냥 spot 인터럽트인 줄 알았다AWS spot은 원래 죽는다. 그건 알고 시작한 거니까. 그래서 처음에는 "아 오늘 그 존이 좀 빡센가 보다" 하고 넘어갈 뻔했다. 근데 로그를 보니 이상했다...

여름방학이 시작되면 부모 입장에서 가장 먼저 걱정되는 것은 아이의 생활리듬입니다. 어린이집·유치원·학교에서 잡아주던 기상, 식사, 낮잠, 취침 시간이 통째로 무너지면, 방학이 끝날 무렵 등원·등교 복귀가 훨씬 힘들어집니다. 미국소아과학회(AAP)와 국내 소아청소년과학회 모두 "휴가·방학 기간에도 취침 시각의 변동은 1시간 이내로 유지하는 것이 권장된다"고 안내합니다.이 글은 만 3세~초등 저학년 아이를 둔 부모를 대상으로, 방학 첫 주에 리듬을 잡아두면 남은 여름 내내 훨씬 편한 7가지 방법을 정리했습니다.Photo by MI PHAM on Unsplash1. 기상 시각은 학기 대비 최대 1시간까지만 늦추기방학이라고 아침 10시, 11시까지 자게 두면 다시 원상 복구하는 데 2주 이상이 걸립니다. 학기 ..

2026년 7월 2일 (목) 12간지 오늘의 운세7월의 두 번째 목요일, 여름의 열기가 본격적으로 시작되는 하루입니다. 이번 주의 반환점에 서서 한 번 크게 심호흡을 해 볼 만한 날이에요. 오늘 하루 각자의 띠에 어울리는 흐름을 가볍게 훑어보고, 마음의 방향을 잡아보세요.🐭 쥐띠 (1972, 1984, 1996, 2008, 2020)전반적으로 리듬이 좋은 하루입니다. 아침에 세운 작은 계획들이 예상보다 술술 풀릴 수 있어요. 애정운은 담백하지만 안정적입니다. 오래 미뤄둔 연락 한 통이 관계를 다시 따뜻하게 만들 수 있으니 부담 없이 안부를 전해보세요.🐮 소띠 (1973, 1985, 1997, 2009, 2021)묵묵하게 쌓아온 노력이 조금씩 형태를 드러내는 시기입니다. 금전운은 큰 변동보다는 소소한 ..