qwerasdfzxc
165
2021-04-21 20:17:11
0
53

전문 검색 플로우질문


안녕하세요 개인 프로젝트를 진행하고있는 학생입니다.

제가 하려고하는 것은 뉴스데이터에서의 키워드 추출입니다.


우선 크롤링을 하고, 그 기사에 대한 키워드를 검색을 해서 어떠한 키워드들이

들어있다면 DB에 저장하고 아니면 저장하지 않으려고 하고 있습니다.


맨처음에는 크롤러에서 몽고 디비에 저장하고, Elastic Search로 키워드 검색

(키워드는 어림잠아 300개정도 되는 것 같습니다)

그리고 검색에대한 결과가있다면 해당 뉴스데이터를 RDB에 저장하려고 했습니다.


하지만 너무 번거로운 것 같아서 다른방법을 찾는 중입니다.

DB에 저장할지 말지 결정하는건데, DB에 넣어서 검색하고 삭제하고는 리소스낭비가 심할 것 같아서 그렇습니다.

크롤러에서 JSON을 서버에 쏴주고 서버에서는 DB에 저장후 검색이아닌 바로 JSON 데이터를  키워드 검색하는 방법은 없을 까요???


0
  • 답변 0

  • 로그인을 하시면 답변을 등록할 수 있습니다.