Q&A
커뮤니티
지식
이벤트
더보기
OKKY
Q&A
지식
커뮤니티
이벤트
부트캠프
Jobs
Contact
Search Bar
로그인
회원가입
tokenizer
전체
기술
커리어
기타
카테고리
전체
최신순
질문하기
답변
1
후거어룰
·
약 3년
563
0
답변 1
distilkobert 못배운 내용이라 손을 못대겠어요 ㅠㅠ 도와주세요
안녕하세요 고수님들 ㅠㅠ 제가 상상했던 프로그램 만들려고 문장에서 단어 뜻을 추론해주는 프로그램을 깃헙에서 찾아서 사용하려고 했는데 오류가 떴어요 ㅠㅠ 지금까진 어찌어찌 해결해왔는데 이번 오류는 구글링해서 할수있는거 다해봤는데 안되는데다가 DistilBertModel 이라든가 체크포인트라든가 무슨소린지 알 수가 없어서 결국 질문드리게 되었습니다... Some weights of the model checkpoint at monologg/distil
해결
1
알리올리오파스타
·
3년 이상
472
0
해결 1
자연어처리 토크나이저 저장후 사용하면 결과값 달라짐
모델을 바로 돌리고 결과값을 보면 원하는 만큼 결과 값이 나와서사용한 토크나이저와 학습한 모델을 저장하고따로 불러와서 test한 결과값을 보면 완전 다르게 나오는데.. 몇번 보다보니까 그냥 훈련하고 결과값을 보면 정상인데 저장한 토크나이저를 따로 불러올때마다 결과값이 완전 달라지는것 같은데.. 원인이 몰까요..학습전tokenizer = Tokenizer()tokeni
Search Bar
