PDF 파일의 OCR 문서화 실패기(Ollama, QWEN3-VL, 파이썬)

참고 하시라고 적습니다.

집에 출판된지 50년 정도된 오래된 문서가 있어서 보관상의 문제를 해결하고자 전부 SCAN 을 해서 PDF로 보관했습니다.

스캔할때 OCR 기능(Adobe나 ABBYY 등)을 이용해 보았지만 처참한 인식율 때문에 사용하지 않고 그냥 검색 안되는 PDF 파일로 만들었습니다.

최근에 AI의 OCR 기능이 매우 좋아졌다고 해서 한번 시도해 보게 되었습니다.

OCR 작업을 하기 위해서 제미나에 프로의 도움을 받아서 시작하게 되었습니다.

9950X, 3080TI, 32GB 램 사양에서 로컬로 가능하다는 제미나이 프로의 추천에 따라 안내하는 대로 설정하고 모든 준비를 마치고 OCR 작업을 했지만, 결과물을 보면 아직은 시기가 아닌것 같습니다.

설정은

1. Ollama, QWEN3-VL-3B 인가 뭔가 설치하고 마지막으로 파이썬 설치

2. 제미나이에게 사용법을 물어물어서 실시 했습니다.

결론.

1. 제미나이 프로의 추천은 구라다. 즉 원본이 495 페이지짜리인데, 이것을 50페이지씩 나누어서 하는데 페이지당 거의 30초 이상 걸리는 것 같습니다. 제대로 마치면 4시간 이상 걸릴 것 같습니다.

2. 파이썬 돌리자마자 3080TI의 VRAM 12GB 중에 거의 11GB 이상을 완전히 소모한다.

3. 중간에 화면 보호기가 실행되지 않고 에러 메시지가 출력됨과 동시에 모니터가 검게 표시되고 아무것도 볼수 없다. 즉 먹통이었습니다. 그래서 파워를 꺼서 재 부팅 했습니다.

4. OCR 결과를 보면 처절합니다.

좀더 좋은 사양의 장비(5090?)를 갖추거나 좀더 높은 버전의 AI를사용하면 결과가 어떻게 나올지 모르겠습니다.

삼전 주가 100만원 가면 맥스튜디오 M5 울트라 128GB 램 사서 한번 해 보고 싶습니다.

PS: 혹시 저작권 문제가 있다면 일부 내용 수정하도록 하겠습니다.

원본 vs. 결과물

   <원본>

  <결과물>

이 책을 읽는 이에게

야구우무베노리(柳生宗矩)는 도쿠가와 이에야스(徳川家康)나 다마사쿠무베(伊達政宗)와는 다른 부류의 인간이다. 그 두 사람의 영주의 집안에 태어나 여주가 몰려받은 재후인데 비해, 무베노리는 야(野)의 한 집안에 태어나 헬헬 달실, 절(剣)만큼 들고 난세(亂世)로 뛰쳐나온 이지의 사람이다. 그 러므로 선행한 국민인 우리들에게 보다 친근해 질 수 있는 사람이라고 말할 수 있겠다. 벌어하는 동안 도쿠가와 이에야스에 배속했던 번파는 다른, 언제나 단순수 있고 몸 가까이 있는 득한 정다운 배려를 느낄 것도 무리라고 생각한다. 칼을 들면 칠전에 당할 자가 없는 부도 송별(無刀勝法)의 달인인 세끼수사이(石舟齋)의 아들로 태어나 견도로 정진한 견재 무베노리지만, 그는 견만의 견을 겸은 것이 아니었고, 이에야스의 심부 곳로 천하를 제패케 하는 데에 큰 공헌을 했다. 따라서 작자는 지금(治國)의 견을 닦은 이 집 무베노 리의 묘사에 치중하였으면서 작품의 무게는 두 말할 것 없고, 현대를 살아갈 수 있는 보석같은 지 해가 견도의 덤보다 큰 비중을 차지하고서 여자의 봉을 앞으로 앞으로 이끌어 갔다. 견재이란 누구나 꿈의 대상으로 삼는 장군가 사법(將軍家師範)이라는 지위에까지 오른 무베노 리의 생애는 그야말로 신하로서 도달할 수 있는 극상의 영예로 꾸나는데, 그 과정을 자자는 실로 비