複雑な文書からテキスト、表、数式、レイアウトを抽出する、0.9BパラメータのマルチモーダルOCRモデルとSDK。
- スター
- 838
- フォーク
- 60
- 未解決の Issue
- 1
- 最終コミット
- 昨日
これは何?
MiniCPM-OCRは、中国語と英語の文書やPDFをテキスト、表、数式に変換するモデル群です。MiniCPM-OCR 1.0(13億パラメータ)は、スキャン画像、写真、湾曲・傾斜したページ、撮影し直した文書などの難しい入力を処理でき、重要情報の抽出にも対応しています。
MiniCPM-OCR Jevは、独立した20億パラメータの判定モデルです。画像とOCR結果を入力すると、領域ごとに0〜1の品質スコアを返すため、信頼できる出力の選別や、人による確認が必要な箇所の特定に役立ちます。さまざまな解析モデルの出力を扱えるよう設計されています。
vLLM、SGLang、llama.cpp、Ollamaで推論でき、BF16、GGUF、AWQ、GPTQの重みがHugging FaceとModelScopeで公開されています。また、pip SDK、ホスト型API、LLaMA-FactoryとSwift向けのファインチューニングチュートリアルも含まれています。
主な機能
- 01中国語と英語の文書やPDFを解析し、Markdown、表、数式に変換します。
- 02スキャン画像、写真、湾曲したページ、撮影し直した文書を処理できます。
- 03テキスト認識に加えて、重要情報の抽出にも対応しています。
- 04OCR結果を領域ごとに採点し、確認が必要な箇所を特定します。
- 05vLLM、SGLang、llama.cpp、Ollamaで動作し、量子化済みの重みも利用できます。
- 06pip SDK、ホスト型API、ファインチューニングガイドを提供します。
ユースケース
- スキャンした契約書、財務諸表、レポートを検索可能なMarkdownに変換する。
- 領収書やフォームから構造化フィールドを抽出し、後続処理に利用する。
- OCR出力を絞り込み、スコアの低い領域だけを人による確認に回す。
- 特定の分野や文書レイアウトに合わせて文書解析モデルをファインチューニングする。
クイックスタート
- 1
MiniCPM-OCR の pip SDK をインストールします
- 2
MiniCPM-OCR 1.0 のローカルデプロイチュートリアルに従ってモデルを実行します
- 3
または Free API を使えば、ローカルのハードウェアなしで認識できます
使う前に知っておきたいこと
- モデルをローカルで実行するには独自のハードウェアが必要ですが、README には最低要件が記載されていません。
- ベンチマークでの上位成績に関する主張の一部はプロジェクト自身による報告であり、ここでは独立した検証を行っていません。
- ホスト型 Free API の利用には、サードパーティプラットフォームのアカウントと利用規約が適用されます。
収録されている特集
トピック
よくある質問
- MiniCPM-OCR とは?
- MiniCPM-OCRは、オープンソースの文書解析モデル群と、OCR結果の正確さを評価するモデルを提供します。 MiniCPM-OCRは、中国語と英語の文書やPDFをテキスト、表、数式に変換するモデル群です。MiniCPM-OCR 1.0(13億パラメータ)は、スキャン画像、写真、湾曲・傾斜したページ、撮影し直した文書などの難しい入力を処理でき、重要情報の抽出にも対応しています。
- MiniCPM-OCR は無料で使えますか?ライセンスは?
- MiniCPM-OCR は Apache-2.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- MiniCPM-OCR は今もメンテナンスされていますか?
- 活発にメンテナンス中。MiniCPM-OCR の最終コミットは 2026年11月6日 です。
- MiniCPM-OCR は何に使えますか?
- スキャンした契約書、財務諸表、レポートを検索可能なMarkdownに変換する。 領収書やフォームから構造化フィールドを抽出し、後続処理に利用する。 OCR出力を絞り込み、スコアの低い領域だけを人による確認に回す。 特定の分野や文書レイアウトに合わせて文書解析モデルをファインチューニングする。
- MiniCPM-OCR のインストール方法は?
- MiniCPM-OCR の pip SDK をインストールします MiniCPM-OCR 1.0 のローカルデプロイチュートリアルに従ってモデルを実行します または Free API を使えば、ローカルのハードウェアなしで認識できます
- MiniCPM-OCR はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/OpenBMB/MiniCPM-OCR
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Baiduのオープンソース視覚言語OCRモデル。長い複数ページの文書やPDFを一度の処理で構造化テキストに変換します。
PDF、Officeファイル、画像をレイアウト解析とOCRでLLM向けのチャンクに変換する、セルフホスト型の文書インテリジェンスAPI。
PDFや画像をLLM・RAGパイプライン向けの構造化されたMarkdownまたはJSONに変換する、オープンソースのOCR・ドキュメントAIツールキット。
文書解析、重要情報抽出、OCR中心の視覚的な質問応答に対応する、統合型の0.8B視覚言語モデル。
PDF、Officeファイル、画像をLLMやエージェントのワークフロー向けにMarkdownまたはJSONへ変換するオープンソースの文書パーサー。