java multipartfile 대용량 업로드 알고리즘...

Question

안녕하세요.spring 프레임워크로 대용량 업로드 구현중입니다.구글링만해도 업로드를 참고할 수 있는 글은 굉장히 많은데요대부분의 로직은 js에서 multipart/form-data로 파일을 넘기고controller에서 multipartFile로 받아서 InputStream에 넣고 FileOutputStream으로 서버에 wirte 해준 후끝나는 로직입니다.최대 3GB업로드 제한을 두고있어서 사용자는 300MB짜리 10개를 올릴수도있고 1GB짜리 3개를 올릴수도있고 3GB짜리 1개도 올릴수 있기에 다양하게 테스트 중입니다.근데 300MB는 업로드를 성공하는데 한.. 700MB를 넘어가기 시작하면 IOException:stale file handle 가 납니다.정확히 로그를 찍어보니 InputStream에서 버퍼크기만큼 읽어서 FileOutputStream으로 서버에 wirte하는 과정에서 거의다 서버에 write했을 시점에 거의 98~99%완료 되었거나 100%완료 된 직후에 파일이 사라져 버리고 IOException:stale file handle 에러가 납니다.저 에러로 구글링을 해보면 NFS 파일시스템 연결 오류 에러로(실제로 서버에 쓰는 위치가 NAS이긴 합니다.) 마운트를 다시 해주라는 얘기만 보이는데 작은용량은 업로드 성공을 잘 하는걸 보면 마운트 때문은 아니고 다른 원인이 있는 것 같습니다.multipartfile 특성이.... 임시로 파일을 가지고 있다가 요청이 끝나면 초기화 시켜버리는 특성이 있다는데...혹시 이것과 연관이 있을 수 있을까요???? 아니면 대용량 업로드 처리에는 뭔가 다른 방법으로 업로드 해주는 게 필요할까요??????????? 며칠째 보고있는데 ㅜㅠㅜㅠ 이거저거 계속 시도해보고있지만 우찌해야하는지 해결을 못하고있습니다. multipartfile을 file에도 옮겨보고 thread.sleep도 줘보고 js에서 controller로 옮기는 방법을 ModelAtrribute로 바꿔도 보고 multipart설정의 변수값도 바꿔줘 보고 기타 등등...뭐라도 의견 댓글주시면 시도해보겠습니다 감사합니다

테스트맨 · Answer

님 개발자는요 정답을 찾는게아니에요바로 해결방법을 찾을 수 있는 개발자는 없습니다.개발자에게 제일 중요한건 문제 해결능력이에요.NAS가 의심되잖아요?그럼 NAS가 아니라 DAS에 저장해보세요.만약 업로드가 잘된다면 일단 NAS문제로 한정시킬수있짢아요 그쵸?개발자는 오답을 지우는 과정에서 해결방안을 찾는겁니다.

테스트맨 · Answer

그리고 대충 이해하지 마시고요 멀티파트에 대해서 잠깐 설명드리면..서버에서 멀티파트옵션중에 MaxInMemorySize라는게 있어요. 서버는 저 사이즈보다 작은 용량의 파일은 메모리에 저장합니다. 그리고 저것보다 커지면 디스크에 저장합니다.

java multipartfile 대용량 업로드 알고리즘...

2개의 답변

Q&A 목록