Multi-book Label Detection Model using Object Detection and OCR
Seongyeon Kim, Jinwoo Park, Sangmin Kim, Yung Na, Yujin Jang · The Journal of Korean Institute of Information Technology · 2023
본 논문에서는 객체 탐지와 광학 문자 인식(이하 OCR)을 복합적으로 사용하여 책장 내의 다수의 책이 꽂혀 있을 때 책등을 탐지하여 책 제목을 추출하고 이를 통해 책에 대한 추가적인 정보를 확인할 수 있는 모델을 구현한 결과에 대해 다루고 있다. 객체 탐지 과정은 책등과 책 제목 영역 탐지로 단계를 분리하였고 2개의 Yolov5 모델을 사용하여 객체 탐지에 대한 성능을 높였다. OCR 단계에서는 출력되는 텍스트의 정확도를 높이기 위하여 이미지가 OCR 모델에 입력되기 전 단계에서 흑백 변환, 크기 변환, 밝기 조절과 같은 전처리를 수행하였다. 느린 OCR 처리 시간에 대한 문제를 보완하기 위해 설계한 모델을 웹 애플리케이션에 적용하는 과정에서 사용자가 원하는 책을 선택하는 기능을 추가하였다. 추가적으로 객체 탐지와 광학 문자 인식을 통해 추출된 제목을 이용해 저자, 출판사, 가격, 후기와 같은 정보를 확인할 수 있도록 하였다.