포스트

네이버 D2 「@RequestCache: HTTP 요청 범위 캐싱을 위한 커스텀 애너테이션 개발기」 리뷰 — 캐시의 수명을 '요청 하나'로 맞추면 TTL 고민이 사라진다, 그리고 @RequestScope가 안 되는 이유

원문: @RequestCache: HTTP 요청 범위 캐싱을 위한 커스텀 애너테이션 개발기 — NAVER D2, 이상혁, 2025-11-26

한 줄 요약

한 HTTP 요청을 처리하는 동안 같은 외부 API를 여러 번 부르는 일이 흔하다. 원문은 “캐시의 수명을 요청 하나와 똑같이” 맞추는 애너테이션 @RequestCache를 만들었다. TTL을 정할 필요가 없고, 요청이 끝나면 Spring이 알아서 치운다. 흥미로운 부분은 첫 시도(@RequestScope)가 왜 실패했는지와, 그 실패에서 배운 것으로 두 번째 설계를 어떻게 했는지다.

무엇이 문제인가

주문 하나를 처리할 때 주문 검증, 결제, 알림 서비스가 각각 사용자 프로필을 조회한다고 하자. 세 곳이 같은 프로필 API를 세 번 부른다. 응답은 느려지고, 외부 서버는 같은 질문을 세 번 받는다.

흔한 해법 둘을 원문이 먼저 검토하고 버린다.

  • 응답 객체를 파라미터로 넘기기. 처음 조회한 프로필을 아래로 계속 넘긴다. 그런데 실제로 프로필을 쓰는 곳이 호출 깊이 3단계 아래 하나뿐이면, 중간 두 단계는 안 쓰는 값을 받아서 넘기기만 해야 한다. 전략 패턴(인터페이스로 여러 구현을 바꿔 끼우는 구조)에서는 더 나쁘다. 한 구현이 프로필을 쓰면 인터페이스에 파라미터를 넣어야 하고, 안 쓰는 구현도 그것을 받아야 한다.
  • Redis나 로컬 캐시에 TTL. TTL이 짧으면(요청이 5초 걸리는데 TTL 3초) 같은 요청 안에서 두 번째 조회가 만료돼 다시 부른다. 길면(TTL 10초) 다른 요청 B가 요청 A의 캐시를 쓴다. 이 애너테이션의 목적은 “같은 요청 안의 중복 방지”이지 요청 사이의 공유가 아니므로, 어느 TTL도 맞지 않는다.

결론: 수명이 요청과 정확히 같은 캐시가 필요하다.

첫 시도: @RequestScope는 왜 안 됐나

Spring에는 빈의 수명을 HTTP 요청으로 맞추는 @RequestScope가 있다. CacheManager에 붙이면 끝날 것 같았다.

원문은 이것이 어떻게 동작하는지부터 확인한다. @RequestScope 빈은 실제로는 프록시(대리인)로 등록된다. 프록시는 싱글턴이지만 메서드가 호출될 때마다 “지금 요청”에 해당하는 실제 인스턴스를 찾아 위임한다. 실제 인스턴스는 RequestAttribute라는 요청별 보관함에 들어 있고, 요청이 끝나면 FrameworkServletfinally에서 반드시 치운다. 예외가 나도 치운다. 그래서 메모리 누수가 없다.

그런데 애플리케이션이 뜨지 않았다. Scope 'request' is not active. 원인은 Spring Actuator다. Actuator의 캐시 메트릭 자동 설정이 애플리케이션 시작 시점에 CacheManager를 건드리는데, 그때는 HTTP 요청이 없으니 요청 스코프가 활성화돼 있지 않다. 프록시가 실제 인스턴스를 찾으려다 예외를 던진다. 그 자동 설정을 빼면 뜨긴 하지만 캐시 적중·미스 메트릭을 잃는다. 근본 해법이 아니다.

두 번째 설계: 매니저는 싱글턴, 캐시만 요청별로

실패에서 얻은 통찰이 설계가 됐다. 문제는 CacheManager 자체를 요청 보관함에 넣었다는 것이다. 그러니 시작 시점에 매니저를 찾다가 깨졌다. 그러면 매니저는 싱글턴으로 두고, 그 안에서 Cache 객체만 요청 보관함에 넣으면 된다.

CacheManager 인터페이스를 직접 구현한 RequestScopedCacheManagergetCache()가 핵심이다.

  1. HTTP 요청이 활성화돼 있는지 확인한다(RequestContextHolder가 예외를 던지면 비활성).
  2. 활성이면 RequestAttribute에서 캐시를 찾고, 없으면 만들어 넣는다.
  3. 비활성이거나 예상 못 한 오류면 NoOpCache를 돌려준다.

3번에 작은 함정이 있다. CacheManager.getCache()의 명세는 “캐시가 없으면 null을 반환”인데, 실제로 null을 돌려주면 @Cacheable이 쓰는 AbstractCacheResolverIllegalArgumentException을 던진다. 그래서 아무것도 안 하는 더미 캐시 NoOpCache를 돌려준다. 캐싱은 안 되지만 오류도 없이 매번 실제 메서드가 실행된다.

애너테이션은 @Cacheable을 메타 애너테이션으로 감싸 이 매니저를 지정한 것이다. Spring의 기존 캐싱 기능을 그대로 쓰면서 저장소만 바꾼 셈이다. 같은 요청에서 4번 호출하는 테스트로 첫 호출만 실제로 나가고 나머지는 캐시에서 오는 것을 확인했다.

한계를 먼저 적었다

  • @Async 메서드에서는 안 된다. 비동기 메서드는 다른 스레드에서 도는데, 요청 컨텍스트는 자식 스레드로 전파되지 않는다(FrameworkServlet이 inheritable을 false로 둔다). 오류는 안 나지만 매번 실제 호출된다.
  • Kafka Consumer에서도 안 된다. HTTP 요청 컨텍스트가 없기 때문이다.

이 둘을 풀려고 ThreadLocal 방식도 검토했지만 버렸다. ThreadLocal은 자동으로 정리되지 않아 HTTP·Kafka·Async 각 실행 경로마다 clear()를 직접 넣어야 하고, 하나라도 빠뜨리면 스레드 풀에서 스레드가 재사용될 때 이전 작업의 캐시가 남는다. 안 되는 곳이 있더라도 자동으로 정리되는 요청 컨텍스트 방식이 안전하다는 판단이다.

읽고 남는 질문

  • 원문의 첫 예시(주문 검증·결제·알림이 각각 프로필 조회)는 세 서비스가 같은 요청 스레드에서 순차 호출될 때만 캐시가 맞는다. 셋을 병렬로 부르는 구조였다면 @Async 한계에 바로 걸린다. 그 경우 원문이 버린 “파라미터로 넘기기”가 오히려 답일 수 있다.
  • 캐시 키가 메서드 인자(userId)로 정해지는데, 같은 요청 안에서 프로필이 바뀌는 경우(조회 → 수정 → 다시 조회)는 낡은 값을 돌려준다. 요청 범위 캐시라 짧지만, @CacheEvict를 같이 쓰는 규약이 있는지 궁금하다.
  • 캐시 적중률 같은 수치가 없다. 도입 전후로 외부 API 호출 수가 얼마나 줄었는지가 있으면 “정말 필요한가”라는 원문 서두의 질문에 대한 답이 됐을 것이다.

한 줄로 가져가기

캐시의 어려움은 대부분 “언제 버리나”에 있다. 수명을 요청 하나에 묶으면 그 질문이 사라지고, 대신 “요청 밖(비동기, 메시지 소비자)에서는 안 된다”는 경계가 생긴다. 그 경계를 먼저 적어 둔 것이 이 글의 좋은 점이다.

시리즈

빅테크 기술 블로그 리뷰

31편 중 25편

  1. 1 카카오 「실시간 메시징 시스템 개발기」(3편) 리뷰 — Redis에 몰린 부하를 서버로 옮기고, 그 서버를 pprof로 세 번 깎은 이야기
  2. 2 카카오 「추가배포 없이 API의 case 통일시키기」 리뷰 — 받는 쪽이 자기 케이스에 맞춰 알아서 읽게 하면 배포 순서가 사라진다
  3. 3 카카오 「MySQL DATETIME, TIMESTAMP 데이터 타입에 대한 분석」 리뷰 — 바이트 단위 저장 구조부터 아직 안 고쳐진 Y2K38까지
  4. 4 네이버 D2 「6개월 만에 연간 수십조를 처리하는 DB CDC 복제 도구 무중단/무장애 교체하기」 리뷰 — 복제·검증·복구를 셋으로 나누고, 옛 도구와 새 도구를 서로 모르게 같이 돌린 전환
  5. 5 카카오 「MySQL ALTER DDL 수행 방식에 대한 이해」 리뷰 — Copy·In-Place·Instant는 '무엇을 복사하느냐'보다 '언제 Exclusive 메타 락을 잡느냐'로 구분된다
  6. 6 카카오 「MySQL Orchestrator 기반의 새로운 HA 표준 개발기」 리뷰 — 10년 멈춘 Perl 도구를 떠나 Raft 클러스터로, 그리고 slave_net_timeout 한 줄
  7. 7 카카오 「MySQL Ver. 8.0 New Feature: Instant DDL Algorithm에 대한 이해」 리뷰 — 컬럼을 0.01초에 추가하는 대가는 '읽을 때마다 버전을 대조하는 것'이다
  8. 8 네이버 D2 「CDC 복제 이후 오라클이 느려졌다? child cursor 폭증이 만든 예상치 못한 문제」 리뷰 — 같은 SQL인데 바인딩 타입이 다르면 Oracle은 다른 쿼리로 본다
  9. 9 카카오 「MySQL InnoDB Log에 대한 이해 - (1)」 리뷰 — 트랜잭션 하나가 어떻게 MTR 여러 개로 쪼개져 Redo Log Buffer에 들어가는가
  10. 10 카카오 「PostgreSQL to ES: Kafka Connect CDC 파이프라인」 1·2편 리뷰 — 변경이 없어서 디스크가 차고, LSN이 사라져서 스냅샷을 다시 짜야 했던 CDC의 실제 운영 비용
  11. 11 LINE 「기획서 없이 내재화하기: 검증 로직으로 동일함을 증명하다」 리뷰 — 블랙박스는 입력과 출력만 정의하면 통계로 같음을 증명할 수 있다
  12. 12 뱅크샐러드 「게임을 만들 때 데이터 정합성을 유지하는 법 (feat. 낙관적 락)」 리뷰 — 같은 WHERE version 조건인데, 충돌한 요청을 어떻게 하는가에서 갈리는 두 설계
  13. 13 우아한형제들 「Spring Batch와 Querydsl」 리뷰 — offset을 버린 Reader가 21분을 4분으로 만든 이유, 그리고 그 Reader가 답하지 않는 두 가지
  14. 14 네이버 D2 「테스트는 어떻게 좋은 코드를 만드는가(feat. 험블 객체 패턴)」 리뷰 — 목이 많아지는 것은 테스트의 문제가 아니라 설계의 신호
  15. 15 당근 「QR을 찍으면 무슨 일이 벌어질까? 당근페이 현장 결제의 모든 것」 리뷰 — 카드망을 빌려 7주 만에 낸 결제와, 그 글이 다루지 않은 승인 응답이 사라지는 순간
  16. 16 네이버 D2 「스마트스토어센터 Oracle에서 MySQL로의 무중단 전환기」 리뷰 — 두 DB에 동시에 쓰되 한쪽 실패는 무시하고, 읽기 트래픽을 복제해 성능을 재고, 6개월간 불일치를 0으로 만든 과정
  17. 17 야놀자 「RESTful API validation 자동화 하기」 리뷰 — 인터페이스 하나에서 검증·문서·타입을 뽑는 이유, 그리고 자동화가 없으면 누락이 필연이라는 문장
  18. 18 카카오 「MySQL Json 데이터 타입의 저장 구조와 성능 비교」 리뷰 — 통째로 넣고 통째로 꺼내면 TEXT, 키로 파고들면 JSON
  19. 19 LINE 「도메인에 의존하지 않는 채팅 플랫폼은 어떻게 만들었을까?」 리뷰 — 사용자를 모르는 채팅 플랫폼, 웹으로 만든 클라이언트, SOFT STOP으로 갈아 끼우는 챗봇 시나리오
  20. 20 카카오페이 「MSA 환경에서 네트워크 예외를 잘 다루는 방법」 리뷰 — Unknown을 타입으로 만든 글과, Unknown을 상태로 저장한 프로젝트가 갈리는 지점
  21. 21 카카오 「메시징 서버의 스트레스 테스트 노하우와 AI가 덜어 준 부분」 리뷰 — 지표를 네 층으로 내려가 읽는 법, 그리고 LLM에게 맡긴 것과 맡기지 못한 것
  22. 22 네이버 D2 「일 3,000만 건의 네이버페이 주문 메시지를 처리하는 Kafka 시스템의 무중단 전환 사례」 리뷰 — 두 벌로 발행해 대조한 검증기와, 발행 제어 키를 파티션 키와 같게 둔 이유
  23. 23 카카오 「잃어버린 리포트를 찾아서: 카카오 메시징 시스템의 경쟁 조건 문제와 안티 패턴 제거 과정」 리뷰 — 벤더가 8ms 만에 리포트를 보냈고, 우리는 101ms짜리 트랜잭션 안에 있었다
  24. 24 컬리 「컬리의 입고 시스템이 외부 인입 데이터를 안전하게 동기화하는 방법」 리뷰 — 145회 재시도가 맞는 도메인과 재시도를 금지한 도메인, 그리고 발행부와 수신부가 각자 책임지는 구조
  25. 25 네이버 D2 「@RequestCache: HTTP 요청 범위 캐싱을 위한 커스텀 애너테이션 개발기」 리뷰 — 캐시의 수명을 '요청 하나'로 맞추면 TTL 고민이 사라진다, 그리고 @RequestScope가 안 되는 이유
  26. 26 무신사 「Kafka와 Strimzi를 이용하여 6개의 도메인을 하나의 도메인으로 합쳐보았습니다」 리뷰 — 배치 없이 CDC와 Kafka Streams로 옮긴 결정, 그리고 통합 모델이 원본과 같다는 것을 누가 확인하는가
  27. 27 쿠팡 「대용량 트래픽 처리를 위한 쿠팡의 백엔드 전략」 리뷰 — 캐시 두 겹과 '분 단위 99.99% 동일'이라는 문장, 그리고 그 0.01%를 누가 어떻게 세는가
  28. 28 LINE 「LINE에서 Kafka를 사용하는 방법 - 1편」 리뷰 — 초당 4GB 클러스터가 바이트가 아니라 요청 수를 제한하는 이유, 그리고 2,000틱짜리 파이프라인에서 같은 것을 본 기록
  29. 29 카카오 「MySQL 인증 플러그인 caching_sha2_password에 대한 이해」 리뷰 — 비밀번호 해시가 바뀌는 것보다 '평문이 서버까지 가야 한다'는 점이 전환의 진짜 비용
  30. 30 LINE 「초당 100만 건, LINE 앱에 Apache Kafka 종단 간 암호화 적용기」 리뷰 — 인터셉터와 시리얼라이저만으로 브로커에 평문을 남기지 않는 법
  31. 31 카카오뱅크 「하루 N억 건의 알림 시스템 구축기 (1)」 리뷰 — P99의 80%가 대기였다는 진단, Age 기반 Work-Stealing, 그리고 큐를 나누는 순간 순서를 잃는 문제
이 기사는 저작권자의 CC BY 4.0 라이센스를 따릅니다.

댓글

아직 댓글이 없습니다