22년 10주 차 Weekly Review

지난 주는 무조건 기분이 안 좋았다. 0.7% 깻잎 한 장 차로 졌다. 내 일상이 좀 더 민주적인 사람이 되도록 하자 정도로 겨우 정리할 수 있었다.

https://unsplash.com/photos/s9CC2SKySJM

업무적으로는 화요일까지는 정말 힘들었다. 당장 오레곤에 EKS 클러스터를 배포해야 하는데 기본적인 워커노드가 join 되지 않았다. (vpc_cni 권한 문제로) join이 되니 이제는 custom metric이 보이지 않았다. EKS 내부 security group 설정 문제였다. EKS 컨트롤 플레인과 워커 노드 간 난 any open 되어 있을 줄 알았는데 컨트롤 플레인이 워커 노드에는 방화벽 설정이 되어 있었다.

 

20년 차 아재, 경력 사원인데 이 정도도 못하나 싶어 자괴감 쩔었다. 1달만에 집에 가야되는 거 아닌가 싶었다. 온프렘과 EKS는 차이가 있었다. 지나고 알고나면 당연한 건데 모르는 상황에서는 참 당황스러웠다. 하지만 어찌하였든 지난 금요일에 클러스터 배포 하였고 겨우 주말 동안 이지만 다행히 별 이상이 없다. 수요일 선거 휴일 날, 차근차근 생각해 보니 큰 도움이 되었다.

 

인간은 망각의 동물이라 실제 작업을 하고 나니 이제 어느 정도 자신감이 생겼다. 다음에 같은 문제가 발생하면 iamrole부터 찾아보니 되지 않을까 하는 막연한 자신감이 생겼다. 물론 모든 장애는 다양한 케이스를 동반하지만. 

 

이번 주는 보안과 비용 부분을 개선 포인트를 찾아 볼 생각이다.

 

Week 10 작업 내역

• 테라폼으로 EKS 클러스터 배포
• gp2 -> gp3 Storage Class 변경
• Service Monitor 등록
• 그라파나 custom 모니터링 대시보드 등록. cluster autoscaler 적용 시 변경되는 파드 및 노드 숫자 변경 내역 그래프 추가. 
• 그라파나 alert rule 조사
• 로컬 PC에서 원격 쿠버네티스 클러스터 관리 방법 공유
• 테라폼 노드 그룹 launch template 수정 테스트 완료
  : 노드 그룹의 인스턴스를 수정하면 노드 그룹 자체를 삭제하고 다시 실행한다.