짧은 이름은 공짜가 아니다

한 줄 요약

짧은 이름이 편한 만큼의 값은 밖으로 나가는 이름을 찾을 때 청구됩니다. 점이 5개 미만인 이름은 전부 search 를 먼저 돌기 때문입니다.

쿠버네티스에서 web 이라고만 써도 같은 네임스페이스의 서비스를 찾을 수 있습니다. 편합니다. 그런데 그 편의에는 값이 붙어 있고, 그 값은 밖으로 나가는 이름을 찾을 때 청구됩니다.

search 와 ndots

파드의 /etc/resolv.conf 는 이렇게 생겼습니다.

search default.svc.cluster.local svc.cluster.local cluster.localnameserver 10.43.0.10options ndots:5

search 는 짧은 이름 뒤에 차례로 붙여 볼 꼬리표들이고, ndots:5 는 점이 5개 미만인 이름은 아직 완성된 이름이 아닐 수 있으니 search 를 먼저 시도하라는 뜻입니다.

web 은 점이 0개니까 당연히 search 를 씁니다. 문제는 example.com 입니다. 점이 하나뿐이라 이것도 5 미만이고, 그래서 이 순서로 물어봅니다.

example.com.default.svc.cluster.local   → NXDOMAINexample.com.svc.cluster.local           → NXDOMAINexample.com.cluster.local               → NXDOMAINexample.com.                            → 드디어 응답

요청 한 번에 왕복 네 번이고 그중 셋은 버려집니다.

왜 지표에 안 잡히나

DNS 조회는 애플리케이션 코드가 아니라 그 아래 라이브러리에서 일어납니다. 그래서 애플리케이션 트레이스에 구간이 잡히지 않는 경우가 많고, 사용자에게는 "조금 느린 요청" 으로만 보입니다. CoreDNS 의 부하만 조용히 올라가다가, 파드 수가 늘어난 어느 날 한계에 닿습니다.

고칠 수 있지만 공짜는 아니다

파드마다 dnsConfig 로 ndots 를 낮출 수 있습니다. 다만 그 파드는 이제 짧은 이름으로 클러스터 서비스를 찾지 못합니다. 그래서 밖으로 나가는 요청이 많은 파드에만 주는 것이 맞습니다. 클러스터 안 통신이 많은 파드에 주면 오히려 손해입니다.

실무에서 진짜 중요한 것

바깥 도메인을 자주 부르는 곳에는 끝점을 찍습니다. example.com. 처럼 마침표를 붙이면 완성된 이름으로 취급되어 search 를 통째로 건너뜁니다. 코드 한 글자로 왕복 네 번이 한 번이 되고, ndots 를 건드리지 않으므로 짧은 이름도 그대로 삽니다.

신호는 CoreDNS 의 질의 수에서 찾습니다. 헛질의도 정상 응답(NXDOMAIN)이라 오류율은 오르지 않습니다. 질의 수가 서비스 호출 수보다 몇 배 많으면 그것이 이 비용을 내고 있다는 뜻입니다.

ndots 는 절대 전역으로 낮추지 않습니다. 짧은 이름으로 클러스터 안 서비스를 부르는 코드가 전부 깨집니다. 바꾸려면 파드 단위로, 그 파드가 짧은 이름을 안 쓴다는 것을 확인하고 해야 합니다.

트레이드오프를 아는 것이 이 주제의 전부입니다. 다음 실습에서 질의 수를 직접 세어 보면, 이 이야기가 숫자로 손에 잡힙니다.