LLM과 NLP 모델은 정확한 구분이 되지 않는 게 맞나요?

Question

ChatGPT가 아닌 GPT 3.5 모델이 NLP로 사용을 할 수 있는 건가요?? 많이 모자르지만 공부중인 대학생입니다.지금 생성형 AI와 자바로 코드 자동화도구 같은 프로그램(예로 메소드 선언부를 입력하면 구현부를 만들어서 출력값을 보여주는.. 혹은 코드를 입력하면 분석해서 테스트 케이스를 추천해주는...)을 만들고 싶어서 계획 중에 있습니다.얕은 지식으로는 사용자 입력에 대해서 NLP 모델로 입력값 데이터 처리 후 그 값을 생성형 AI(LLM)에게 넘겨서 산출물을 보여주는 식으로 생각했습니다. (정확히 어떻게 AI가 적용되는지 몰라서 너무 두루뭉술하게 생각이 되네요...)예를 들어서 GPT3.5 모델을 NLP로 사용해서 다른 Gemini API 같은 LLM에 입력을 하는 것처럼요.. 근데 이런 방식으로 해야 하는게 맞나요? 아니면 GPT 3.5가 자연어 처리도 되면서 LLM로써 파인튜닝이 다 가능한 건가요?또 자바를 쓰는데 gpt 같은 건 다 파이썬 라이브러리이고 stanford NLP가 자바 라이브러리이던데, 자바로 개발을 하려면 자바 라이브러리로 되어있는 stanford NLP 같은 걸 쓰는 게 맞는건가요?너무 아무 것도 몰라서 제가 무엇을 틀린지, 설명이 잘못되고 있는 건지 모르겠습니다. 1. GPT 3.5 모델은 NLP 모델인가요? NLP의 기능도 수행 가능한 생성형 AI(LLM)인가요? 2. NLP 모델 없이 LLM API만으로 코딩자동화도구를 만들 수 있는건가요? 3. 자바로 파이썬 라이브러리 AI를 다루는 건 문제가 없나요?많이 어려워서 질문드려봅니다. 엉망진창 질문이지만 조금이라도 도움 주시면 정말 감사하겠습니다.

allinux · Accepted Answer

우선 NLP 라는 것부터 이해하셔야 할 것 같습니다. 자연언어처리라는 의미인데 자연어 처리라는 것이 굉장히 넓은 개념입니다. LLM 이 NLP 하위개념인 것은 맞습니다만 gpt 3.5 가 NLP 모델이냐는 질문은 차라리 GPT 가 LLM 모델이냐는 질문으로 고쳐야 할 것 같습니다. 물론 지금은 SLLM과 같이 직접 호스팅할 수 있는 작은 모델이 많이 발표되고 있습니다.(LLM 은 보통 직접 호스팅하기 어려운 사이즈입니다.)LLM API 만으로 자동화 도구를 만들 수 있습니다. 프롬프트만 잘 정의해서 질의하면 됩니다.자바로 파이썬(CPYTHON) API 는 직접 호출 할 수 없습니다.

휴지통비우기 · Answer

인터넷 검색해서 약자의 원뜻을 찾아보세요.LLM은 생성 모델을 의미하는게 아니라 Large 즉 큰 언어 모델이라는 뜻입니다. GPT라는 구조를 가지는 자연어 모델(NLP)이 버전이 올라가면서 파라미터 수가 점점 많아졌는데 그렇게 기존의 모델보다 아주 큰 모델인 GPT3~4 쯤부터 대략 LLM이라고 부릅니다. 생성 자체는 모델 크기랑 상관이 없지만 작은 모델은 생성이 잘 안되기 때문에 LLM을 쓰게 됩니다.

LLM과 NLP 모델은 정확한 구분이 되지 않는 게 맞나요?

2개의 답변

Q&A 목록