스프링 조회결과 대용량 엑셀파일 다운로드

Question

안녕하세요.고객의 요청이 있어서 이리저리 구글링을 해 보는 중인데 도무지 방향이 정해지지 않아서 오키에 질문을 남겨보게 되었습니다.현재 스프링으로 구현된 시스템에서 조회한 결과를 엑셀파일로 다운로드를 할 수 있는 기능이 구현되어 있습니다. 서버의 특정 위치에 poi라이브러리 활용하여 쿼리 결과에 대하여 엑셀 파일을 생성하고 저장된 파일을 다운로드하는 방식으로 조회결과 엑셀 파일 다운로드를 지원하고 있습니다.진행하고자 하는 작업은 두 가지입니다.현재는 3만건 미만의 데이터만 시스템을 통해서 다운로드할 수 있는데 대량의 조회결과에 대해서도 나올 수 있게 하기( 아웃 오브 메모리 등의 문제 예상)시스템에 부하가 염려되어서 백그라운드로 요청이 오면 그것을 순차적으로 처리해 주는 데몬(?)을 만들어서 하나씩 처리해 주기고객사의 요청은 1번이고 2번은 팀 내에서 논의를 하다가 이런 식으로 하는 게 어떻겠냐고 이야기가 나와서 진행되는 내용입니다.그래서 제가 개인적으로 생각하기로 스프링 내부에 백그라운드로 데몬을 돌리면서 사용자가 요청이 오면 그걸 요청 순서대로 순차적으로 처리해 주고 완료여부를 DB로 관리하여 특정 화면에서 파일 다운로드를 할 수 있게끔 하려고 생각하였는데 아무리 검색을 해도 어떤 식으로 해야 할지 감이 안 잡혀서요ㅠㅠ 혜안이 있으시다면 조금의 힌트라도 공유해 주시면 정말 감사하겠습니다.2번의 경우는 작업결과 대비 공수가 너무 많이 들어가는 작업일 수도 있겠다는 생각이 듭니다. 그냥 대용량 처리에 대해서 그때 그때 처리만 해 준다고 한다면 시스템 부하나 메모리 부족 외에 제가 더 고려해야 할 이슈가 있을까요? 그리고 그러한 방법을 방지하기 위한 조언도 받을 수 있다면 좋겠습니다.

kiel · Answer

제가 쓰는 마케팅 툴의 경우 리포트 결과가 크기 때문에, 엑셀 다운로드 요청 버튼을 누르면 뒷단에서 생성해서 로그인 계정의 메일로 압축 파일을 보내주고 있습니다.

emblossom · Answer

1번은 하다 중간에 뻗을듯 한데 ..

판교바닐라라떼 · Answer

조회 결과를 꼭 한 엑셀 파일로 내려보내야 하나요? 잘라서 내려보내도 된다면 여러개의 적당한 사이즈의 엑셀 파일로 나눠서 임시 저장한 다음 압축 파일로 묶어서 내려보내고 임시 저장한 파일을 지워버리면 좀 편하게 진행됳 것 같은데요

감독님테스트가하고싶어요 · Answer

선착순 순차적 처리면 redis sorted set 참고해보세요

플래니타 · Answer

https://www.google.com/search?q=poi+%EB%8C%80%EC%9A%A9%EB%9F%89&oq=poi+%EB%8C%80%EC%9A%A9%EB%9F%89&aqs=chrome..69i57j0i512l4j0i5i30.7446j0j7&client=ms-android-xiaomi-rvo3&sourceid=chrome-mobile&ie=UTF-8

스프링 조회결과 대용량 엑셀파일 다운로드

5개의 답변

Q&A 목록