이미지 텍스트 변환 질문드립니다!!!

Question

안녕하세요 !취미로 사이드 프로젝트를 해볼려고 하는데, 제목처럼 이미지를 텍스트로 변환하려고 하는데 막혀버렸어요...그래서 어떻게 접근해야 할지 선배님들의 고건을 여쭤보려구 합니다.사실 이건 두 번째 질문인데요... (아래는 첫 번째 질문)https://okky.kr/questions/1508098#answer-778600선배님들이 딥러닝이랑 ocr 말씀해주셨는데, 일단 이 기회에 (할수만 있다면) 그 유명한! 딥러닝도 공부해보고 싶어서요!!먼저 딥러닝 공부해보고 제 능력으로 안 될것 같으면 그 다음으로 OCR 도전... OCR도 안될 것 같으면 그냥 기존에 썼던 pytesseract ocr써서 프로젝트 마무리하고 다른거 해야겠어요.. ㅋㅋㅋㅋㅋ1. 변환하려고 하는 이미지 샘플 먼저 보여드리겠습니다!이미지는 항상 0 ~ 999,999 범위의 숫자만이구 본문에 올려둔 이미지와 같이 방향도 폰트도 항상 일정합니다!단, 이미지 크기는 32 x 15로 맞출려고 했는데 1~2px씩 차이나는 게 있긴 해요... 배경이 약간씩 달라지긴 하는데 이미지에서 흰 부분이 아닌 애들을 모두 0으로 바꾸면 얼추 비슷하게 나오더라구요. 배열로 출력해보면 이런식으로 나옵니다!2. 이미지를 봤을 때 0 ~9 패턴을 정규화 해보면 거의 동일하게 나올 것 같은데요... 만약 0 ~ 9까지 숫자 패턴을 추적할 수 있다면 머신러닝?? 딥러닝?? 을 사용해서 안정적으로 텍스트 변환이 가능할까요?3. 그리구 지피티 선생님께 여쭤보면 계속 CNN을 사용해서 모델을 구현하시더라구요...제가 인공지능에 조예가 없어서 살짝 이론만 먼저 공부를 해봤는데, 잘 이해가 안 되는게 이 모델을 사용하든 다른 모델을 사용하든 하나의 이미지에서 여러 특징을 잡아낼 수 있는건가요?예를들면 이게 가능한지 여쭤보고 싶습니다! 가능성만 있다면 바로 공부해서 적용해보고 싶은데요ㅠㅠ1) 원형, 0패딩 제거, 미흡한 정규화(아마 이럴 경우는 거의 없을 것 같긴 해요...)를 다 잡아낼 수 있다2) 1)처럼 나머지 숫자인 9와 0도 잡아낼 수 있다3) 최종적으로 7 9 0 을 얻는다4. 아!! 마지막으로 제가 만들고 있는 토이 프로젝트가 스프링을 사용하고 있는데요...만약 위에서 모델을 만들어서 사용하려면 파이썬 장고랑 엔진엑스 사용하는 걸로 변경하면 될까요 ㅠㅠ?답변 미리 감사드리구 많은 고견 부탁드립니다 !금요일 화이팅 하시구 즐거운 주말 보내세요~!

다크브라운 · Accepted Answer

아 입력 이미지의 환경이 많이 유사하네요? 그러면 편법 아닌 편법을 써볼수도 있을 것 같습니다.opencv 기능 중 matchTemplate이라는 기능이 있는데 입력받은 이미지에 대해 내가 준비해 놓은 템플릿(이 케이스에서는 0~9까지의 이미지겠네요)과 매칭시켜 가장 유사한 위치를 반환해주는 함수입니다. 원래는 가장 유사한 케이스만 반환해주지만 조금 검색해보시면 다수의 매칭 결과를 반환시켜주는 코드도 있을겁니다.아래는 올려주신 이미지 가지고 캡처만 대충 떠서 제가 간단하게 결과를 내본 예시입니다. 후처리 로직만 어떻게 좀 더 잘 짤수 있으면 숫자 케이스에 한해 비스무레한 로직을 구현할 수 있지 않을까 합니다[원본 이미지][템플릿][매칭 결과]그나저나 OCR이 주변에서 심심찮게 볼 수 있어서 그렇지 쉽지 않은 기술이네요 ㅎㅎ...

이미지 텍스트 변환 질문드립니다!!!

1개의 답변

#tensorflow 목록