복잡한 문서에서 텍스트, 표, 수식, 레이아웃을 추출하는 0.9B 파라미터 멀티모달 OCR 모델 및 SDK입니다.
OpenBMB/MiniCPM-OCR
MiniCPM-OCR은 오픈소스 문서 파싱 모델 제품군과 OCR 결과의 정확도를 평가하는 보조 모델입니다.
대체할 수 있는 제품:ABBYY FineReader
- 스타
- 838
- 포크
- 60
- 열린 이슈
- 1
- 마지막 커밋
- 17시간 전
어떤 프로젝트인가요?
MiniCPM-OCR은 중국어와 영어 문서 및 PDF를 텍스트, 표, 수식으로 파싱하는 모델 모음입니다. MiniCPM-OCR 1.0(파라미터 1.3B)은 스캔본, 사진, 휘거나 기울어진 페이지, 재촬영한 문서처럼 처리하기 까다로운 입력을 다루며, 핵심 정보 추출도 지원합니다.
MiniCPM-OCR Jev는 별도의 2B 판정 모델입니다. 이미지와 OCR 결과를 입력하면 영역별로 0~1의 품질 점수를 반환해, 신뢰할 수 있는 결과를 선택하고 사람의 검토가 필요한 콘텐츠를 찾는 데 도움을 줍니다. 다양한 파싱 모델의 출력과 함께 사용하도록 설계되었습니다.
프로젝트는 vLLM, SGLang, llama.cpp, Ollama를 통한 추론을 지원하며, BF16, GGUF, AWQ, GPTQ 가중치를 Hugging Face와 ModelScope에 공개합니다. pip SDK와 호스팅 API도 제공하며, LLaMA-Factory와 Swift를 사용한 파인튜닝 튜토리얼도 포함합니다.
핵심 기능
- 01중국어와 영어 문서 및 PDF를 Markdown, 표, 수식으로 파싱합니다.
- 02스캔본, 사진, 휘어진 페이지, 재촬영한 문서를 처리합니다.
- 03텍스트 인식과 함께 핵심 정보 추출을 지원합니다.
- 04영역별로 OCR 결과에 점수를 매겨 검토가 필요한 콘텐츠를 표시합니다.
- 05vLLM, SGLang, llama.cpp, Ollama에서 실행할 수 있으며 양자화된 가중치도 제공합니다.
- 06pip SDK, 호스팅 API, 파인튜닝 가이드를 제공합니다.
활용 사례
- 스캔한 계약서, 재무제표, 보고서를 검색 가능한 Markdown으로 변환합니다.
- 영수증이나 양식에서 구조화된 필드를 추출해 후속 처리에 활용합니다.
- 점수가 낮은 영역만 사람의 검토 대상으로 보내도록 OCR 출력을 필터링합니다.
- 특정 도메인이나 문서 레이아웃에 맞게 문서 파서를 파인튜닝합니다.
빠른 시작
- 1
MiniCPM-OCR pip SDK를 설치합니다
- 2
MiniCPM-OCR 1.0 로컬 배포 튜토리얼에 따라 모델을 실행합니다
- 3
또는 Free API를 사용하면 로컬 하드웨어 없이 인식할 수 있습니다
사용 전 알아둘 점
- 모델을 로컬에서 실행하려면 자체 하드웨어가 필요하며, README에는 최소 사양이 나와 있지 않습니다.
- 벤치마크에서 최고 수준의 성능을 보였다는 주장 중 일부는 프로젝트 자체의 보고이며, 여기서 독립적으로 검증하지 않았습니다.
- 호스팅된 Free API를 사용하려면 타사 플랫폼 계정이 필요하며 해당 플랫폼의 약관이 적용됩니다.
포함된 컬렉션
토픽
자주 묻는 질문
- MiniCPM-OCR은(는) 무엇인가요?
- MiniCPM-OCR은 오픈소스 문서 파싱 모델 제품군과 OCR 결과의 정확도를 평가하는 보조 모델입니다. MiniCPM-OCR은 중국어와 영어 문서 및 PDF를 텍스트, 표, 수식으로 파싱하는 모델 모음입니다. MiniCPM-OCR 1.0(파라미터 1.3B)은 스캔본, 사진, 휘거나 기울어진 페이지, 재촬영한 문서처럼 처리하기 까다로운 입력을 다루며, 핵심 정보 추출도 지원합니다.
- MiniCPM-OCR은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
- MiniCPM-OCR은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
- MiniCPM-OCR은(는) 아직 유지보수되고 있나요?
- 활발히 유지보수 중. MiniCPM-OCR의 마지막 커밋은 2026년 11월 6일입니다.
- MiniCPM-OCR은(는) 어디에 사용할 수 있나요?
- 스캔한 계약서, 재무제표, 보고서를 검색 가능한 Markdown으로 변환합니다. 영수증이나 양식에서 구조화된 필드를 추출해 후속 처리에 활용합니다. 점수가 낮은 영역만 사람의 검토 대상으로 보내도록 OCR 출력을 필터링합니다. 특정 도메인이나 문서 레이아웃에 맞게 문서 파서를 파인튜닝합니다.
- MiniCPM-OCR는 어떻게 설치하나요?
- MiniCPM-OCR pip SDK를 설치합니다 MiniCPM-OCR 1.0 로컬 배포 튜토리얼에 따라 모델을 실행합니다 또는 Free API를 사용하면 로컬 하드웨어 없이 인식할 수 있습니다
- MiniCPM-OCR은(는) 어디서 받을 수 있나요?
- 소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/OpenBMB/MiniCPM-OCR
요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.
관련 프로젝트
Baidu의 오픈소스 비전-언어 OCR 모델로, 긴 다중 페이지 문서와 PDF를 한 번의 추론으로 구조화된 텍스트로 변환합니다.
PDF, Office 파일과 이미지를 레이아웃 분석 및 OCR을 거쳐 LLM에 바로 사용할 수 있는 청크로 변환하는 셀프 호스팅 문서 인텔리전스 API입니다.
PDF와 이미지를 LLM 및 RAG 파이프라인용 구조화된 Markdown이나 JSON으로 변환하는 오픈소스 OCR 및 문서 AI 툴킷입니다.
문서 파싱, 핵심 정보 추출, OCR 중심 시각 질의응답을 위한 통합 0.8B 비전-언어 모델입니다.
PDF, Office 파일, 이미지를 Markdown이나 JSON으로 변환해 LLM 및 에이전트 워크플로에서 활용하는 오픈소스 문서 파서입니다.