분산 환경 세션 저장소 고민 (JDBC vs Redis/Valkey vs Hazelcast)
다중 인스턴스 환경에서 세션 스토리지 아키텍처를 잡을 때마다 매번 고민하게 되는 후보군들에 대해 가볍게 생각을 정리해볼 겸 글을 남겨봅니다. 스프링 생태계(Spring Session)를 쓰다 보면 결국 마주치는 대표 선택지가 RDB(JDBC), Redis(또는 Valkey), 그리고 Hazelcast 세 가지가 대표적일 거라고 생각합니다. 예전에는 Couchbase 나 MongoDB 도 검토 대상이었지만, 지금은 지원 문제 등으로 제외하고 있구요. 각자 장단점과 운영 특성이 확연히 달라서 상황마다 손이 가는 기준이 달라지는 것 같습니다. 다만, 지금 회사에서 특정 소스 중에는 세션 저장을 별도 구현으로 Redis 에 맞춰 해놓은게 있어서(회사 보안 적용 코드 때문에 Spring Session 적영 어려움) Redis 를 표준 시스템 구성에 포함해야 하는 경우도 있습니다.
제가 현재까지 가장 선호하는 방식은 RDB 기반(Spring Session JDBC)입니다.
별도의 세션용 인프라 클러스터를 구축하거나 관리할 필요가 없고 운영 중인 RDB(Oracle, PostgreSQL, MariaDB, MySQL 등)에 테이블 몇 개 올리면 끝나니 초기 인프라 구성이 더 이상 늘어나지 않아 경제적이고 관리 지점이 늘어나지 않는다는 장점이 있습니다. 장시간 운영 환경에서 사용할 때에도 평시에는 문제가 발생한 적이 없습니다. Spring 버전이 낮아 Spring Session 버전이 매우 낮음에도 말이죠.
하지만, 요청마다 발생하는 세션 갱신/조회 질의가 계속 반복됩니다. 특히 세션 만료 처리를 위해 주기적으로 삭제 질의가 돌아가는데, 테이블 락이나 인덱스 관리가 은근히 귀찮습니다. 서버 수량이 늘어나면 여러 서버가 지속적으로 질의를 하기 때문에 각 서버에서 이 동작을 끄고 별도의 cron job 등으로 한 곳에서 주기적으로 실행하게 만드는게 낫습니다. TTL/expiry 개념이 없는, NoSQL 제품이 아니라서 발생하는 문제입니다. 가장 큰 문제는 트래픽이 몰릴 때 메인 비즈니스 질의와 DB 풀의 커넥션을 나눠 쓰다보니 병목이 생길 가능성이 생깁니다. 비즈니스의 문제인지 아닌지 판별이 조금 어려워질 때가 있더라구요.
질의 등은 잘 갖춰져있지만 제품에 따라 약간씩 추가 설정이 필요한 경우도 있습니다. Oracle 의 경우나 PostgreSQL 일 경우 정리 옵션 변경 등이 이런 것에 해당합니다.
제가 운영하는 또다른 방식은 Redis 입니다. 인메모리 기반이라 지연 시간이 적고, 기본 지원되는 TTL 기능 덕분에 세션 만료 처리가 매우 자연스럽습니다(다만 관리형 서비스에 연결하면 WAS 통지가 되는지 설정 확인 필요). 표준처럼 자리 잡은 조합이라 레퍼런스, 모니터링 생태계(대시보드, 메트릭), 문제 해결 사례가 가장 풍부합니다. 이건 AI 에게 문제 분석해달라고 하기에 딱 좋은 점이죠.
하지만, 관리형 서비스를 이용하지 않을 경우 별도의 독립된 인프라 프로세스/클러스터(Sentinel, Cluster 등)를 구축하고 운영해야 하는 관리 포인트가 생깁니다. 애플리케이션과 세션 저장소 간 네트워크 I/O(TCP 홉)가 무조건 한 번 발생합니다. 당연하겠지만 관리형 서비스나 SaaS 형태로 구축 시 Public 통신이 필요할 경우 VPN 이 가능한지, 아니면 SSL 로만 구성해도 괜찮은지(인증 심사가 필요할 경우 거부될 수 있음) 잘 알아봐야 합니다.
무엇보다 Redis 는 괴랄한 사용법과 구버전으로 구추할 경우 세션 외 다른 데이터(캐시 데이터 등)와 같이 이용할 경우 세션만 모두 지운다던지 하는 작업을 위해 별도 개발을 더 해야 할 수도 있고, 용어와 실제 동작이 상식과 맞지 않거나 관리가 쉽지 않다는 점에서 제가 가장 안좋아하는 구성이기도 합니다.
그래서 차라리 tomcat 등 외부 WAS 를 쓸 경우 WAS 의 세션 복제를 검토하긴 합니다만, tomcat 의 세션 복제(Cluster)가 워낙 별로라서…Spring Session 이나 tomcat 에 별도 라이브러리로 Redis 연동하는 쪽이 낫다는 의견인데, 혹시 다른 분들은 어떻게 쓰시나요? 설마 다들 JWT 같은 걸로 다 대체해서 세션 복제는 고려하지 않으실까요?
제가 선호하는 또다른 방식은 Hazelcast 를 이용하는 방식입니다.
Embedded 방식을 지원해서(Redis 처럼 Client-Server 모드 가능, Java 가 아니라면 이렇게 써야 함) 별도의 외부 세션 서버를 띄우지 않고, JVM 프로세스 내에 라이브러리로 인스턴스끼리 세션 데이터를 직접(P2P)로 복제/파티셔닝 할 수 있습니다. 로컬 JVM 메모리에서 바로 읽어올 수 있는 구간(Near Cache 등)이 존재해 네트워크 홉 없이 세션을 참조하는 초저지연 구성도 잘 설계하면 가능합니다. 특히 자바 친화적이라 자바 객체 직렬화/역직렬화 및 스프링과의 밀착 연동이 깔끔하고 Java 기본 자료형들을 대부분 제공하는 라이브러리라서 추가적인 코딩을 통해 응용해서 다른 용도로 사용하기에도 적합합니다. 저는 채팅 서버 구현할 때에도 이용합니다.
하지만, 애플리케이션 인스턴스가 늘어나거나 갑자기 중단될 때, 홋은 배포 시 클러스터 멤버 추가, 제거 그리고 보관된 데이터의 재배치(리밸런싱)/데이터 마이그레이션 오버헤드가 발생하며, JVM 힙 메모리를 세션이 함께 갉아먹습니다. 네트워크 파티션(Split-brain) 발생 시 클러스터 정합성 복구가 까다로울 수 있습니다. 별도 Client-Server 모드로 띄울 수도 있지만, 그렇게 인프라를 분리할 거라면 굳이 Redis/Valkey 대신 Hazelcast 를 선택할 실익은 크지 않다고 생각합니다.
저의 경우 openfire 라는 제품을 추가 운영해야 하는 이슈가 있고, 이 녀석 역시 Hazelcast 기반으로 클러스터를 구성하기 때문에 POC 를 통해 CP 모드가 아닌 AP 모드 사용 등 어느 정도 검증을 하고 사용중인 상황입니다.
tomcat 등의 외장 WAS 를 사용할 경우 WAS 자체의 세션 복제 기능을 이용하기도 하겠지만, 특히 tomcat 의 udp/tcp 기반 복제가 좋지 못해 가급적 spring session 을 이용하는 편입니다. 물론 모든 인증을 JWT 와 같은 토큰을 이용하는 방식으로 바꿨다고 하실 수 있겠지만, 토큰을 그리 좋아하진 않기도 합니다.
여러분들은 주로 어떤 방식을 사용하시나요?