
서버를 운영하다 보면 한 대로 잘 돌아가던 서비스를 쿠버네티스로 옮기자는 이야기를 듣는다. 그런데 실제 장애 기록을 보면 트래픽보다 설정 오류나 복구 절차 부재가 더 자주 문제를 키웠다. 쿠버네티스 입문도 설치 명령부터 외우기보다, 지금 해결하려는 운영 문제가 무엇인지 적는 데서 시작하는 편이 낫다.
한 대의 서버로 충분한지 먼저 계산한다
쿠버네티스는 여러 서버에 컨테이너를 배치하고, 죽은 컨테이너를 다시 띄우고, 배포 중 서비스 중단을 줄이는 데 유용하다. 그만큼 제어 영역, 네트워크, 저장소, 모니터링을 함께 운영해야 한다. 웹서버 한 대와 데이터베이스 한 대로 여유 있게 돌아가는 작은 사이트라면 운영 항목만 늘어날 수 있다.
가령 하루 페이지 조회가 1만 건이고 페이지당 서버 요청이 평균 5건이라면 하루 요청은 약 5만 건이다. 초당 평균으로는 0.6건 정도다. 피크가 평균의 10배여도 초당 6건 안팎이다. 이 수치만으로 서버 사양을 확정할 수는 없지만, 바로 여러 노드를 사야 할 규모로 보기도 어렵다. 캐시 유무, 요청당 데이터베이스 조회, 이미지 처리처럼 실제로 CPU와 메모리를 쓰는 구간을 먼저 측정해야 한다.
단일 서버 장애가 곧 매출 손실로 이어지거나, 하루에도 여러 번 배포하고, 서비스별 자원 충돌이 잦다면 이야기가 달라진다. 그때는 쿠버네티스의 운영 비용을 감수할 이유가 생긴다. 공부 목적이라면 로컬 클러스터나 한 대의 저렴한 서버로도 기본 개념을 익힐 수 있다.
처음에는 파드와 배포 단위만 잡는다
가장 작은 실행 단위는 파드다. 보통 웹 애플리케이션 컨테이너 하나를 파드 하나에 넣고 시작한다. Deployment는 원하는 파드 수와 갱신 방식을 선언한다. 복제 수를 2로 적으면 쿠버네티스가 파드 두 개를 유지하려 한다. 다만 노드가 한 대뿐이면 파드가 두 개여도 그 서버가 꺼질 때 함께 멈춘다.
Service는 파드가 교체돼 주소가 바뀌어도 내부에서 같은 이름으로 접근하게 해 준다. 외부 요청을 받으려면 별도의 진입 구성도 필요하다. 처음 실습에서는 웹 애플리케이션 하나를 배포하고, Service로 연결한 뒤, 파드 하나를 삭제해 다시 만들어지는지 보는 정도면 충분하다. 이 과정을 이해하지 못한 채 구성 파일만 복사하면 장애 때 어디부터 봐야 할지 막막해진다.
이미지 태그는 배포마다 구분할 수 있게 붙인다. 계속 바뀌는 동일한 태그를 쓰면 어느 버전이 실행 중인지 추적하기 어렵다. 환경별 설정은 이미지와 분리하고, 비밀번호 같은 값은 접근 권한을 제한한다. 쿠버네티스의 Secret에 넣었다는 사실만으로 저장 데이터가 자동 암호화됐다고 생각해서도 안 된다.
자원 수치와 상태 검사를 함께 설정한다
첫 배포에서 자주 빠지는 값이 CPU와 메모리 요청량이다. 요청량은 스케줄러가 파드를 어느 노드에 둘지 판단할 때 쓰고, 제한량은 자원 사용의 상한을 정한다. 예를 들어 평소 메모리 사용량이 300MiB인 앱이라면 128MiB 제한부터 넣을 이유가 없다. 정상 요청과 배치 작업을 돌려 실제 사용량을 확인한 뒤 여유를 잡아야 한다. 메모리 제한을 넘으면 컨테이너가 종료될 수 있다.
상태 검사도 역할이 다르다. 준비 상태 검사는 새 파드가 요청을 받을 준비가 됐는지 판단한다. 실행 상태 검사는 멈춘 프로세스를 다시 띄우는 데 쓴다. 시작이 느린 애플리케이션에 실행 상태 검사만 공격적으로 걸면 정상적으로 뜨는 중에도 계속 재시작된다. 배포 직후 요청을 받아도 되는 시점과 실제로 복구가 필요한 상태를 구분해 설정하는 게 좋다.
자동 확장은 나중 문제다. CPU 사용률만 보고 복제 수를 늘려도 데이터베이스 연결 수가 한계에 닿으면 응답은 더 느려질 수 있다. 먼저 한 파드가 어느 정도 요청을 처리하는지 부하 테스트로 확인하고, 병목이 애플리케이션인지 데이터베이스인지 구분해야 한다.
백업과 장애 확인 순서를 먼저 문서화한다
쿠버네티스가 파드를 다시 띄워도 지워진 데이터까지 복구해 주지는 않는다. 데이터베이스를 클러스터 안에 둘 경우 저장소와 백업 설계가 별도로 필요하다. 입문 단계에서는 데이터베이스를 기존 관리형 서비스나 별도 서버에 두고, 상태가 없는 웹 애플리케이션부터 옮기는 편이 단순하다. 백업은 파일이 생성됐는지보다 실제 복원에 걸린 시간과 복원된 데이터가 맞는지를 확인해야 한다.
장애가 나면 먼저 사용자가 보는 증상을 확인한다. 모든 요청이 실패하는지, 특정 기능만 느린지에 따라 확인할 곳이 달라진다. 그다음 진입 구간, Service 연결 대상, 파드 상태, 최근 배포, 애플리케이션 로그 순으로 좁혀 간다. 파드가 계속 재시작된다면 종료 이유와 메모리 사용량을 보고, 파드는 정상인데 응답이 없으면 준비 상태 검사와 서비스 연결을 살핀다. 최근 변경 내역과 되돌릴 이미지 버전이 있으면 복구 시간이 크게 줄어든다.
운영 환경에서 서버 장애까지 견디려면 파드뿐 아니라 노드도 분산돼야 한다. 노드가 늘면 비용도 늘고, 백업과 관측 체계도 그만큼 중요해진다. 그래서 나는 작은 서비스를 하나 올려 보고, 일부러 파드를 지우고, 이전 버전으로 되돌리고, 백업에서 복원하는 순서로 익힌다. 이 네 가지가 손에 익으면 쿠버네티스가 필요한 규모인지도 훨씬 또렷하게 보인다.
