OCR PDF — извлечение текста из сканированных PDF с PDF Oxide
Извлекайте текст из сканированных PDF с помощью встроенного OCR. Начиная с v0.3.27, OCR доступен во всех языковых привязках — Python, Node.js, Go, C# и Rust — через единый FFI-слой (pdf_ocr_engine_create, pdf_ocr_page_needs_ocr, pdf_ocr_extract_text).
Python
from pdf_oxide import PdfDocument
doc = PdfDocument("scanned.pdf")
text = doc.extract_text_ocr(0)
print(text)
Node.js
const { PdfDocument, OcrEngine } = require("pdf-oxide");
const doc = new PdfDocument("scanned.pdf");
const ocr = new OcrEngine();
if (ocr.pageNeedsOcr(doc, 0)) {
console.log(ocr.extractText(doc, 0));
}
ocr.close();
doc.close();
Go
import pdfoxide "github.com/yfedoseev/pdf_oxide/go"
doc, _ := pdfoxide.Open("scanned.pdf")
defer doc.Close()
ocr, _ := pdfoxide.NewOcrEngine()
defer ocr.Close()
if ocr.NeedsOcr(doc, 0) {
text, _ := ocr.ExtractTextWithOcr(doc, 0)
fmt.Println(text)
}
C#
using PdfOxide.Core;
using PdfOxide.Ocr;
using var doc = PdfDocument.Open("scanned.pdf");
using var ocr = new OcrEngine();
if (ocr.PageNeedsOcr(doc, 0))
{
Console.WriteLine(ocr.ExtractText(doc, 0));
}
Rust
use pdf_oxide::PdfDocument;
use pdf_oxide::ocr::{OcrEngine, OcrConfig, OcrExtractOptions, extract_text_with_ocr};
let mut doc = PdfDocument::open("scanned.pdf")?;
let config = OcrConfig::default();
let engine = OcrEngine::new("models/det.onnx", "models/rec.onnx", "models/dict.txt", config)?;
let options = OcrExtractOptions::default();
let text = extract_text_with_ocr(&mut doc, 0, Some(&engine), options)?;
println!("{text}");
Java
import fyi.oxide.pdf.PdfDocument;
try (PdfDocument doc = PdfDocument.open("scanned.pdf")) {
// Lean-tier bindings have no OCR engine handle — extractTextAuto
// routes scanned pages through OCR automatically (graceful fallback).
String text = doc.extractTextAuto(0);
System.out.println(text);
}
PHP
<?php
use PdfOxide\PdfDocument;
$doc = PdfDocument::open("scanned.pdf");
// No OCR engine handle in the lean tier — extractTextAuto routes
// scanned pages through OCR automatically (graceful fallback).
echo $doc->extractTextAuto(0);
Ruby
require "pdf_oxide"
doc = PdfOxide::PdfDocument.open("scanned.pdf")
# No OCR engine handle in the lean tier — extract_text_auto routes
# scanned pages through OCR automatically (graceful fallback).
puts doc.extract_text_auto(0)
C++
#include <pdf_oxide/pdf_oxide.hpp>
auto doc = pdf_oxide::Document::open("scanned.pdf");
auto engine = pdf_oxide::OcrEngine::create("det.onnx", "rec.onnx", "dict.txt");
if (doc.ocr_page_needs_ocr(0)) {
std::string text = doc.ocr_extract_text(0, &engine);
std::cout << text << "\n";
}
Swift
import PdfOxide
let doc = try Document.open("scanned.pdf")
let engine = try OcrEngine.create(
detModelPath: "det.onnx", recModelPath: "rec.onnx", dictPath: "dict.txt")
if try doc.ocrPageNeedsOcr(0) {
let text = try doc.ocrExtractText(0, engine: engine)
print(text)
}
Kotlin
import fyi.oxide.pdf.PdfDocument
PdfDocument.open("scanned.pdf").use { doc ->
// Lean-tier bindings have no OCR engine handle — extractTextAuto
// routes scanned pages through OCR automatically (graceful fallback).
println(doc.extractTextAuto(0))
}
Dart
import 'package:pdf_oxide/pdf_oxide.dart';
final doc = PdfDocument.open('scanned.pdf');
final engine = OcrEngine.create('det.onnx', 'rec.onnx', 'dict.txt');
if (doc.pageNeedsOcr(0)) {
print(doc.ocrExtractText(0, engine));
}
engine.close();
doc.close();
R
library(pdfoxide)
doc <- pdf_open("scanned.pdf")
engine <- pdf_ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
if (pdf_ocr_page_needs_ocr(doc, 0)) {
text <- pdf_ocr_extract_text(doc, 0, engine)
cat(text)
}
Julia
using PdfOxide
doc = open_document("scanned.pdf")
engine = ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
if page_needs_ocr(doc, 0)
text = ocr_extract_text(doc, 0, engine)
println(text)
end
Zig
const pdf_oxide = @import("pdf_oxide");
const a = std.heap.page_allocator;
var doc = try pdf_oxide.Document.open("scanned.pdf");
defer doc.deinit();
var engine = try pdf_oxide.OcrEngine.create("det.onnx", "rec.onnx", "dict.txt");
defer engine.deinit();
if (try doc.ocrPageNeedsOcr(0)) {
const text = try doc.ocrExtractText(a, 0, engine);
defer a.free(text);
std.debug.print("{s}\n", .{text});
}
Scala
import fyi.oxide.pdf.PdfDocument
val doc = PdfDocument.open("scanned.pdf")
// Lean-tier bindings have no OCR engine handle — extractTextAuto
// routes scanned pages through OCR automatically (graceful fallback).
println(doc.extractTextAuto(0))
doc.close()
Clojure
(require '[pdf-oxide.core :as pdf])
(with-open [doc (pdf/open "scanned.pdf")]
;; Lean-tier bindings have no OCR engine handle — the AutoExtractor
;; routes scanned pages through OCR automatically (graceful fallback).
(let [ax (pdf/auto-extractor doc)]
(println (pdf/auto-text ax))))
Objective-C
#import "POXPdfOxide.h"
NSError *err = nil;
POXDocument *doc = [POXDocument openPath:@"scanned.pdf" error:&err];
POXOcrEngine *engine = [POXOcrEngine createWithDetModelPath:@"det.onnx"
recModelPath:@"rec.onnx"
dictPath:@"dict.txt"
error:&err];
if ([doc pageNeedsOcr:0 error:&err]) {
NSString *text = [doc ocrExtractText:0 engine:engine error:&err];
NSLog(@"%@", text);
}
Elixir
{:ok, doc} = PdfOxide.open("scanned.pdf")
{:ok, engine} = PdfOxide.ocr_engine("det.onnx", "rec.onnx", "dict.txt")
case PdfOxide.ocr_page_needs_ocr(doc, 0) do
{:ok, true} ->
{:ok, text} = PdfOxide.ocr_extract_text(doc, 0, engine)
IO.puts(text)
_ ->
:ok
end
PDF Oxide включает PaddleOCR через ONNX Runtime — без установки Tesseract, без системных зависимостей, без вызова дочерних процессов. OCR-движок работает прямо внутри процесса. Поддерживаются семейства моделей PP-OCRv3, PP-OCRv4 и PP-OCRv5.
Примечание: OCR недоступен в WebAssembly (требуется нативный ONNX Runtime). Для Go / Node.js / C# / Rust собирайте с фичей
ocr. Колёса Python поставляются с включённым OCR по умолчанию.
OCR сканированных PDF в Python без Tesseract
Большинство Python-решений для OCR требуют установки Tesseract как системной зависимости — сложной настройки, которая различается между операционными системами и CI-окружениями. PDF Oxide включает модели PaddleOCR прямо в Python-колесо:
- Без системных зависимостей — достаточно
pip install pdf_oxide - Без дочерних процессов — OCR работает нативно через ONNX Runtime
- Три семейства моделей — PP-OCRv3, PP-OCRv4 и PP-OCRv5
- Автоматическое определение страниц — различает сканированные и текстовые страницы
Сравнение: PDF Oxide OCR vs PyMuPDF + Tesseract
| PDF Oxide | PyMuPDF + Tesseract | |
|---|---|---|
| Установка | pip install pdf_oxide |
pip install pymupdf + системный Tesseract |
| OCR-движок | PaddleOCR (ONNX) | Tesseract (дочерний процесс) |
| Сложность настройки | Одна строка | Установка Tesseract под каждую ОС |
| CI/Docker | Без дополнительной конфигурации | Требует apt-get install tesseract-ocr |
| Модели включены | Да (в колесе) | Нет (отдельная загрузка) |
Установка
Python
pip install pdf_oxide
OCR-модели уже включены в колесо. Дополнительных загрузок не требуется.
Rust
[dependencies]
pdf_oxide = { version = "0.3", features = ["ocr"] }
Go
go build -tags ocr ./...
Node.js
npm install pdf-oxide --build-from-source -- --features ocr
C#
NuGet-пакет поставляется с включённым OCR в бинарниках по умолчанию для Linux / macOS / Windows — дополнительная конфигурация не нужна.
Когда использовать OCR
Большинство PDF содержат встроенный текст, который extract_text() обрабатывает за 0.8 мс на страницу. OCR нужен только для:
- Сканированных документов — бумажных документов, отсканированных в PDF
- PDF только из изображений — PDF, созданных из фотографий или скриншотов
- PDF с текстом в виде изображений — некоторые генераторы растеризуют текст
- Гибридных страниц — страниц с нативным текстом и сканированными областями одновременно
Версии моделей PP-OCR
PDF Oxide поддерживает три поколения моделей PaddleOCR. Конфигурация по умолчанию работает с PP-OCRv3 и PP-OCRv4. Серверные модели PP-OCRv5 требуют другой стратегии масштабирования.
PP-OCRv3 / PP-OCRv4 (по умолчанию)
Модели, оптимизированные для мобильных устройств: изображения уменьшаются до максимальной длины стороны. Хорошо подходят для большинства документов.
- Модель обнаружения: DBNet++ (лёгкая)
- Модель распознавания: SVTR
- Стратегия масштабирования:
MaxSide— уменьшает длинную сторону до 960 пикс. - Лучше всего подходит для: стандартных документов, мобильного/периферийного развёртывания
Python
from pdf_oxide import OcrConfig, OcrEngine
# Default config works with v3/v4 models
config = OcrConfig()
engine = OcrEngine("det_v4.onnx", "rec_v4.onnx", "dict.txt", config)
Rust
use pdf_oxide::ocr::{OcrConfig, OcrEngine};
// Default config: MaxSide { max_side: 960 }
let config = OcrConfig::default();
let engine = OcrEngine::new("det_v4.onnx", "rec_v4.onnx", "dict.txt", config)?;
PP-OCRv5 (Сервер)
Серверные модели, сохраняющие высокое разрешение за счёт увеличения изображений при необходимости. Значительно точнее на плотных или мелкопечатных документах.
- Модель обнаружения: DBNet++ (серверная, более крупная)
- Модель распознавания: SVTR-v5
- Стратегия масштабирования:
MinSide— обеспечивает минимальный размер короткой стороны в 64 пикс., ограничение до 4000 пикс. - Лучше всего подходит для: высокоточного извлечения, серверных сред, плотного текста
Python
from pdf_oxide import OcrConfig, OcrEngine
# v5 config: high-resolution input for server models
config = OcrConfig(use_v5=True)
engine = OcrEngine("det_v5.onnx", "rec_v5.onnx", "dict_v5.txt", config)
Rust
use pdf_oxide::ocr::{OcrConfig, OcrEngine};
// v5 config: MinSide { min_side: 64, max_side_limit: 4000 }
let config = OcrConfig::v5();
let engine = OcrEngine::new("det_v5.onnx", "rec_v5.onnx", "dict_v5.txt", config)?;
Сравнение моделей
| Характеристика | PP-OCRv3/v4 | PP-OCRv5 |
|---|---|---|
| Стратегия масштабирования | MaxSide (уменьшение до 960 пикс.) |
MinSide (увеличение, ограничение 4000 пикс.) |
| Входное разрешение | Ниже (быстрее) | Выше (точнее) |
| Размер модели обнаружения | ~3 МБ | ~12 МБ |
| Размер модели распознавания | ~12 МБ | ~25 МБ |
| Лучше всего подходит для | Мобильные, периферийные, стандартные документы | Сервер, плотный текст, мелкий шрифт |
OcrConfig |
OcrConfig() / OcrConfig::default() |
OcrConfig(use_v5=True) / OcrConfig::v5() |
Определение типа страницы
PDF Oxide автоматически классифицирует страницы, чтобы определить, нужен ли OCR. Функция extract_text_ocr() делает это внутри себя, но вы также можете определять типы страниц вручную.
Автоматическое определение сканированных страниц
Python
from pdf_oxide import PdfDocument
doc = PdfDocument("mixed.pdf")
for i in range(doc.page_count()):
text = doc.extract_text(i)
if len(text.strip()) < 50:
# Likely scanned — use OCR
text = doc.extract_text_ocr(i)
print(f"Page {i + 1} (OCR): {text[:100]}...")
else:
print(f"Page {i + 1} (text): {text[:100]}...")
Rust
use pdf_oxide::PdfDocument;
use pdf_oxide::ocr::{detect_page_type, PageType, OcrEngine, OcrConfig, OcrExtractOptions, extract_text_with_ocr};
let mut doc = PdfDocument::open("mixed.pdf")?;
let engine = OcrEngine::new("det.onnx", "rec.onnx", "dict.txt", OcrConfig::default())?;
for i in 0..doc.page_count() {
let page_type = detect_page_type(&mut doc, i)?;
match page_type {
PageType::NativeText => {
let text = doc.extract_text(i)?;
println!("Page {} (native): {}...", i + 1, &text[..100.min(text.len())]);
}
PageType::ScannedPage => {
let text = extract_text_with_ocr(&mut doc, i, Some(&engine), OcrExtractOptions::default())?;
println!("Page {} (OCR): {}...", i + 1, &text[..100.min(text.len())]);
}
PageType::HybridPage => {
// Has both native text and scanned images — merges both sources
let text = extract_text_with_ocr(&mut doc, i, Some(&engine), OcrExtractOptions::default())?;
println!("Page {} (hybrid): {}...", i + 1, &text[..100.min(text.len())]);
}
}
}
Java
import fyi.oxide.pdf.PdfDocument;
try (PdfDocument doc = PdfDocument.open("mixed.pdf")) {
for (int i = 0; i < doc.pageCount(); i++) {
// extractTextAuto classifies each page and routes scanned
// pages through OCR automatically (graceful fallback).
System.out.printf("Page %d: %s%n", i + 1, doc.extractTextAuto(i));
}
}
PHP
<?php
use PdfOxide\PdfDocument;
$doc = PdfDocument::open("mixed.pdf");
for ($i = 0; $i < $doc->pageCount(); $i++) {
// extractTextAuto classifies each page and routes scanned
// pages through OCR automatically (graceful fallback).
printf("Page %d: %s\n", $i + 1, $doc->extractTextAuto($i));
}
Ruby
require "pdf_oxide"
doc = PdfOxide::PdfDocument.open("mixed.pdf")
doc.page_count.times do |i|
# extract_text_auto classifies each page and routes scanned
# pages through OCR automatically (graceful fallback).
puts "Page #{i + 1}: #{doc.extract_text_auto(i)}"
end
C++
#include <pdf_oxide/pdf_oxide.hpp>
auto doc = pdf_oxide::Document::open("mixed.pdf");
auto engine = pdf_oxide::OcrEngine::create("det.onnx", "rec.onnx", "dict.txt");
for (int i = 0; i < doc.page_count(); ++i) {
std::string text = doc.ocr_page_needs_ocr(i)
? doc.ocr_extract_text(i, &engine) // scanned / hybrid → OCR
: doc.extract_text(i); // native text
std::cout << "Page " << (i + 1) << ": " << text << "\n";
}
Swift
import PdfOxide
let doc = try Document.open("mixed.pdf")
let engine = try OcrEngine.create(
detModelPath: "det.onnx", recModelPath: "rec.onnx", dictPath: "dict.txt")
for i in 0..<(try doc.pageCount()) {
let text = try doc.ocrPageNeedsOcr(i)
? doc.ocrExtractText(i, engine: engine) // scanned / hybrid → OCR
: doc.extractText(i) // native text
print("Page \(i + 1): \(text)")
}
Kotlin
import fyi.oxide.pdf.PdfDocument
PdfDocument.open("mixed.pdf").use { doc ->
for (i in 0 until doc.pageCount()) {
// extractTextAuto classifies each page and routes scanned
// pages through OCR automatically (graceful fallback).
println("Page ${i + 1}: ${doc.extractTextAuto(i)}")
}
}
Dart
import 'package:pdf_oxide/pdf_oxide.dart';
final doc = PdfDocument.open('mixed.pdf');
final engine = OcrEngine.create('det.onnx', 'rec.onnx', 'dict.txt');
for (var i = 0; i < doc.pageCount; i++) {
final text = doc.pageNeedsOcr(i)
? doc.ocrExtractText(i, engine) // scanned / hybrid → OCR
: doc.extractText(i); // native text
print('Page ${i + 1}: $text');
}
engine.close();
doc.close();
R
library(pdfoxide)
doc <- pdf_open("mixed.pdf")
engine <- pdf_ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
for (i in seq_len(pdf_page_count(doc)) - 1) {
text <- if (pdf_ocr_page_needs_ocr(doc, i)) {
pdf_ocr_extract_text(doc, i, engine) # scanned / hybrid -> OCR
} else {
pdf_extract_text(doc, i) # native text
}
cat(sprintf("Page %d: %s\n", i + 1, text))
}
Julia
using PdfOxide
doc = open_document("mixed.pdf")
engine = ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
for i in 0:(page_count(doc) - 1)
text = page_needs_ocr(doc, i) ?
ocr_extract_text(doc, i, engine) : # scanned / hybrid -> OCR
extract_text(doc, i) # native text
println("Page $(i + 1): $text")
end
Zig
const pdf_oxide = @import("pdf_oxide");
const a = std.heap.page_allocator;
var doc = try pdf_oxide.Document.open("mixed.pdf");
defer doc.deinit();
var engine = try pdf_oxide.OcrEngine.create("det.onnx", "rec.onnx", "dict.txt");
defer engine.deinit();
var i: i32 = 0;
const n = try doc.pageCount();
while (i < n) : (i += 1) {
const text = if (try doc.ocrPageNeedsOcr(i))
try doc.ocrExtractText(a, i, engine) // scanned / hybrid → OCR
else
try doc.extractText(a, i); // native text
defer a.free(text);
std.debug.print("Page {d}: {s}\n", .{ i + 1, text });
}
Scala
import fyi.oxide.pdf.PdfDocument
val doc = PdfDocument.open("mixed.pdf")
for (i <- 0 until doc.pageCount) {
// extractTextAuto classifies each page and routes scanned
// pages through OCR automatically (graceful fallback).
println(s"Page ${i + 1}: ${doc.extractTextAuto(i)}")
}
doc.close()
Clojure
(require '[pdf-oxide.core :as pdf])
(with-open [doc (pdf/open "mixed.pdf")]
;; The AutoExtractor classifies each page and routes scanned pages
;; through OCR automatically (graceful fallback).
(println (pdf/auto-text (pdf/auto-extractor doc))))
Objective-C
#import "POXPdfOxide.h"
NSError *err = nil;
POXDocument *doc = [POXDocument openPath:@"mixed.pdf" error:&err];
POXOcrEngine *engine = [POXOcrEngine createWithDetModelPath:@"det.onnx"
recModelPath:@"rec.onnx"
dictPath:@"dict.txt"
error:&err];
NSInteger n = [doc pageCountError:&err];
for (NSInteger i = 0; i < n; i++) {
NSString *text = [doc pageNeedsOcr:i error:&err]
? [doc ocrExtractText:i engine:engine error:&err] // scanned / hybrid → OCR
: [doc extractText:i error:&err]; // native text
NSLog(@"Page %ld: %@", (long)(i + 1), text);
}
Elixir
{:ok, doc} = PdfOxide.open("mixed.pdf")
{:ok, engine} = PdfOxide.ocr_engine("det.onnx", "rec.onnx", "dict.txt")
{:ok, n} = PdfOxide.page_count(doc)
for i <- 0..(n - 1) do
{:ok, text} =
case PdfOxide.ocr_page_needs_ocr(doc, i) do
{:ok, true} -> PdfOxide.ocr_extract_text(doc, i, engine) # scanned / hybrid -> OCR
_ -> PdfOxide.extract_text(doc, i) # native text
end
IO.puts("Page #{i + 1}: #{text}")
end
Варианты PageType (Rust)
| Вариант | Описание |
|---|---|
NativeText |
Страница содержит встроенный текст — OCR не нужен |
ScannedPage |
Страница полностью сканированная (большое изображение, текст отсутствует или минимален) — полный OCR |
HybridPage |
Страница содержит и нативный текст, и сканированные изображения — результаты объединяются |
Вспомогательная функция needs_ocr() возвращает true как для ScannedPage, так и для HybridPage:
use pdf_oxide::ocr::needs_ocr;
if needs_ocr(&mut doc, 0)? {
let text = extract_text_with_ocr(&mut doc, 0, Some(&engine), OcrExtractOptions::default())?;
}
Как это работает
- PDF Oxide внутренне рендерит страницу в изображение (при 300 DPI)
- Изображение масштабируется в соответствии со стратегией обнаружения (
MaxSideдля v3/v4,MinSideдля v5) - DBNet++ обнаруживает текстовые области в виде четырёхугольных ограничивающих рамок
- SVTR распознаёт символы в каждой обнаруженной области
- Результаты собираются в текст с сортировкой по порядку чтения
- Для гибридных страниц OCR-текст объединяется с нативным текстом
Весь конвейер работает внутри процесса через ONNX Runtime. Никаких внешних бинарных файлов, дочерних процессов, временных файлов.
Конфигурация OCR
Python
from pdf_oxide import OcrConfig, OcrEngine
# Default (v3/v4)
config = OcrConfig()
# PP-OCRv5 server models
config = OcrConfig(use_v5=True)
# Custom thresholds
config = OcrConfig(
det_threshold=0.5, # Detection confidence (0.0-1.0)
box_threshold=0.7, # Box confidence (0.0-1.0)
rec_threshold=0.6, # Recognition confidence (0.0-1.0)
num_threads=8, # ONNX Runtime threads
max_candidates=500, # Max text regions
)
# v5 with custom thresholds
config = OcrConfig(use_v5=True, det_threshold=0.4, num_threads=8)
engine = OcrEngine("det.onnx", "rec.onnx", "dict.txt", config)
Rust
use pdf_oxide::ocr::{OcrConfig, OcrConfigBuilder, DetResizeStrategy};
// Default (v3/v4): MaxSide { max_side: 960 }
let config = OcrConfig::default();
// PP-OCRv5: MinSide { min_side: 64, max_side_limit: 4000 }
let config = OcrConfig::v5();
// Custom builder
let config = OcrConfig::builder()
.det_threshold(0.5)
.box_threshold(0.7)
.rec_threshold(0.6)
.num_threads(8)
.max_candidates(500)
.detect_styles(true) // Enable style detection from OCR geometry
.build();
// Custom resize strategy
let config = OcrConfig::builder()
.det_resize_strategy(DetResizeStrategy::MinSide {
min_side: 128,
max_side_limit: 6000,
})
.build();
DetResizeStrategy (Rust)
Управляет масштабированием входных изображений перед запуском модели обнаружения.
| Вариант | Поля | Описание |
|---|---|---|
MaxSide |
max_side: u32 (по умолчанию: 960) |
Уменьшает изображение так, чтобы длинная сторона вписывалась в max_side. По умолчанию для PP-OCRv3/v4. |
MinSide |
min_side: u32 (по умолчанию: 64), max_side_limit: u32 (по умолчанию: 4000) |
Увеличивает изображение так, чтобы короткая сторона была не менее min_side, ограничение max_side_limit. По умолчанию для PP-OCRv5. |
Поля OcrConfig
| Поле | Тип | По умолчанию | Описание |
|---|---|---|---|
det_threshold |
f32 |
0.3 |
Порог вероятности обнаружения |
box_threshold |
f32 |
0.6 |
Порог уверенности рамки |
rec_threshold |
f32 |
0.5 |
Порог уверенности распознавания |
det_max_side |
u32 |
960 |
Максимальный размер изображения (совместимость с v3/v4) |
det_resize_strategy |
DetResizeStrategy |
MaxSide { 960 } |
Стратегия масштабирования изображения |
rec_target_height |
u32 |
48 |
Целевая высота вырезки для распознавания |
num_threads |
usize |
4 |
Потоки ONNX Runtime для инференса |
unclip_ratio |
f32 |
1.5 |
Коэффициент расширения рамки |
max_candidates |
usize |
1000 |
Максимальное количество текстовых областей |
detect_styles |
bool |
true |
Определять стили шрифта по геометрии OCR |
det_model_path |
Option<PathBuf> |
None |
Путь к пользовательской модели обнаружения |
rec_model_path |
Option<PathBuf> |
None |
Путь к пользовательской модели распознавания |
dict_path |
Option<PathBuf> |
None |
Путь к пользовательскому словарю символов |
Пользовательские модели
Используйте собственные ONNX-модели вместо встроенных:
Rust
use pdf_oxide::ocr::OcrConfig;
let config = OcrConfig::builder()
.det_model_path("models/custom_det.onnx")
.rec_model_path("models/custom_rec.onnx")
.dict_path("models/custom_dict.txt")
.build();
Определение стилей
Когда detect_styles включён (по умолчанию), PDF Oxide определяет стили шрифта (жирный, уровень заголовка) по геометрии OCR — размеру текста, межстрочному интервалу и позиции. Это улучшает качество конвертации сканированных страниц в Markdown.
let config = OcrConfig::builder()
.detect_styles(true) // Infer styles from text geometry
.build();
OCR vs Tesseract
| Характеристика | PDF Oxide OCR | Tesseract (через PyMuPDF) |
|---|---|---|
| Установка | pip install pdf_oxide |
Системный пакет + pytesseract |
| Системные зависимости | Нет | Требуется бинарный файл Tesseract |
| Среда выполнения | ONNX (в процессе) | Дочерний процесс |
| Версии моделей | PP-OCRv3, v4, v5 | Tesseract LSTM |
| Языки | Многоязычный | Требуются языковые пакеты |
| Сложность настройки | Нулевая | Умеренная |
| Модель обнаружения | DBNet++ | Встроенная в Tesseract |
| Модель распознавания | SVTR / SVTR-v5 | Tesseract LSTM |
| Поддержка высокого разрешения | Стратегия MinSide (v5) |
Настройка DPI |
| Определение типа страницы | Автоматическое (нативный/сканированный/гибридный) | Вручную |
Пользовательский DPI
Управляйте разрешением рендеринга при конвертации PDF-страниц в изображения для OCR:
Python
from pdf_oxide import PdfDocument
doc = PdfDocument("scanned.pdf")
# Default is 300 DPI — good balance of accuracy and speed
text = doc.extract_text_ocr(0)
# Higher DPI for better accuracy on fine print
text = doc.extract_text_ocr(0) # DPI configured via OcrExtractOptions in Rust
Rust
use pdf_oxide::ocr::OcrExtractOptions;
// Higher DPI = better accuracy but slower
let options = OcrExtractOptions::default().with_dpi(300.0);
// Lower DPI = faster but less accurate
let options = OcrExtractOptions::default().with_dpi(150.0);
Структура OCR-вывода (Rust)
Метод OcrEngine::ocr_image() возвращает подробные результаты с показателями уверенности для каждого фрагмента:
use pdf_oxide::ocr::OcrEngine;
let engine = OcrEngine::new("det.onnx", "rec.onnx", "dict.txt", Default::default())?;
let output = engine.ocr_image(&image)?;
// Full text in reading order
println!("{}", output.text_in_reading_order());
// Per-span details
for span in &output.spans {
println!("Text: '{}' (confidence: {:.2})", span.text, span.confidence);
println!(" Bounding box: {:?}", span.bounding_rect());
println!(" Per-char confidence: {:?}", span.char_confidences);
}
// Overall confidence
println!("Total confidence: {:.2}", output.total_confidence);
Поля OcrOutput
| Поле / Метод | Тип | Описание |
|---|---|---|
spans |
Vec<OcrSpan> |
Все распознанные текстовые области |
total_confidence |
f32 |
Средняя уверенность по всем фрагментам |
text() |
String |
Весь текст, объединённый через пробелы |
text_in_reading_order() |
String |
Текст, отсортированный по позиции (сверху вниз, слева направо) |
Поля OcrSpan
| Поле | Тип | Описание |
|---|---|---|
text |
String |
Распознанный текст |
polygon |
[[f32; 2]; 4] |
Четырёхугольная ограничивающая рамка (4 угла) |
confidence |
f32 |
Общая уверенность (0.0–1.0) |
char_confidences |
Vec<f32> |
Уверенность для каждого символа |
Пакетная обработка OCR
Обработайте директорию со сканированными PDF:
Python
from pdf_oxide import PdfDocument, PdfError
from pathlib import Path
pdf_dir = Path("scans/")
output_dir = Path("text-output/")
output_dir.mkdir(exist_ok=True)
for pdf_path in pdf_dir.glob("*.pdf"):
try:
doc = PdfDocument(str(pdf_path))
pages = []
for i in range(doc.page_count()):
text = doc.extract_text(i)
if len(text.strip()) < 50:
text = doc.extract_text_ocr(i)
pages.append(text)
out_path = output_dir / pdf_path.with_suffix(".txt").name
out_path.write_text("\n\n".join(pages), encoding="utf-8")
except PdfError as e:
print(f"Error: {pdf_path.name}: {e}")
Rust
use pdf_oxide::PdfDocument;
use pdf_oxide::ocr::{OcrEngine, OcrConfig, OcrExtractOptions, extract_text_with_ocr, needs_ocr};
use std::fs;
use std::path::Path;
let engine = OcrEngine::new("det.onnx", "rec.onnx", "dict.txt", OcrConfig::default())?;
let options = OcrExtractOptions::default();
for entry in fs::read_dir("scans/")? {
let path = entry?.path();
if path.extension().map_or(false, |e| e == "pdf") {
let mut doc = PdfDocument::open(path.to_str().unwrap())?;
let mut all_text = String::new();
for i in 0..doc.page_count() {
let text = if needs_ocr(&mut doc, i)? {
extract_text_with_ocr(&mut doc, i, Some(&engine), options.clone())?
} else {
doc.extract_text(i)?
};
all_text.push_str(&text);
all_text.push_str("\n\n");
}
let out_path = Path::new("text-output/")
.join(path.file_stem().unwrap())
.with_extension("txt");
fs::write(out_path, &all_text)?;
}
}
Параллельный OCR (Python)
from pdf_oxide import PdfDocument
from multiprocessing import Pool
from pathlib import Path
def ocr_pdf(pdf_path: str) -> dict:
doc = PdfDocument(pdf_path)
text = ""
for i in range(doc.page_count()):
text += doc.extract_text_ocr(i) + "\n"
return {"file": pdf_path, "text": text}
pdf_files = [str(p) for p in Path("scans/").glob("*.pdf")]
with Pool(4) as pool:
results = pool.map(ocr_pdf, pdf_files)
OCR в Markdown
Конвертируйте сканированные страницы в Markdown:
Python
from pdf_oxide import PdfDocument
doc = PdfDocument("scanned-report.pdf")
for i in range(doc.page_count()):
md = doc.to_markdown(i, detect_headings=True)
if len(md.strip()) < 50:
# Scanned page — OCR then format
text = doc.extract_text_ocr(i)
md = text # OCR output is plain text
print(f"--- Page {i + 1} ---")
print(md)
Rust
use pdf_oxide::PdfDocument;
use pdf_oxide::ocr::{OcrEngine, OcrConfig, OcrExtractOptions, needs_ocr, extract_text_with_ocr};
let mut doc = PdfDocument::open("scanned-report.pdf")?;
let engine = OcrEngine::new("det.onnx", "rec.onnx", "dict.txt", OcrConfig::default())?;
for i in 0..doc.page_count() {
let text = if needs_ocr(&mut doc, i)? {
extract_text_with_ocr(&mut doc, i, Some(&engine), OcrExtractOptions::default())?
} else {
doc.to_markdown(i, &Default::default())?
};
println!("--- Page {} ---\n{}", i + 1, text);
}
Java
import fyi.oxide.pdf.PdfDocument;
try (PdfDocument doc = PdfDocument.open("scanned-report.pdf")) {
for (int i = 0; i < doc.pageCount(); i++) {
String md = doc.toMarkdown(i);
if (md.strip().length() < 50) {
// Scanned page — auto-routing returns OCR text (plain).
md = doc.extractTextAuto(i);
}
System.out.printf("--- Page %d ---%n%s%n", i + 1, md);
}
}
PHP
<?php
use PdfOxide\PdfDocument;
$doc = PdfDocument::open("scanned-report.pdf");
for ($i = 0; $i < $doc->pageCount(); $i++) {
$md = $doc->toMarkdown($i);
if (strlen(trim($md)) < 50) {
// Scanned page — auto-routing returns OCR text (plain).
$md = $doc->extractTextAuto($i);
}
printf("--- Page %d ---\n%s\n", $i + 1, $md);
}
Ruby
require "pdf_oxide"
doc = PdfOxide::PdfDocument.open("scanned-report.pdf")
doc.page_count.times do |i|
md = doc.to_markdown(i)
if md.strip.length < 50
# Scanned page — auto-routing returns OCR text (plain).
md = doc.extract_text_auto(i)
end
puts "--- Page #{i + 1} ---\n#{md}"
end
C++
#include <pdf_oxide/pdf_oxide.hpp>
auto doc = pdf_oxide::Document::open("scanned-report.pdf");
auto engine = pdf_oxide::OcrEngine::create("det.onnx", "rec.onnx", "dict.txt");
for (int i = 0; i < doc.page_count(); ++i) {
std::string text = doc.ocr_page_needs_ocr(i)
? doc.ocr_extract_text(i, &engine) // scanned / hybrid → OCR
: doc.to_markdown(i); // native → Markdown
std::cout << "--- Page " << (i + 1) << " ---\n" << text << "\n";
}
Swift
import PdfOxide
let doc = try Document.open("scanned-report.pdf")
let engine = try OcrEngine.create(
detModelPath: "det.onnx", recModelPath: "rec.onnx", dictPath: "dict.txt")
for i in 0..<(try doc.pageCount()) {
let text = try doc.ocrPageNeedsOcr(i)
? doc.ocrExtractText(i, engine: engine) // scanned / hybrid → OCR
: doc.toMarkdown(i) // native → Markdown
print("--- Page \(i + 1) ---\n\(text)")
}
Kotlin
import fyi.oxide.pdf.PdfDocument
PdfDocument.open("scanned-report.pdf").use { doc ->
for (i in 0 until doc.pageCount()) {
var md = doc.toMarkdown(i)
if (md.trim().length < 50) {
// Scanned page — auto-routing returns OCR text (plain).
md = doc.extractTextAuto(i)
}
println("--- Page ${i + 1} ---\n$md")
}
}
Dart
import 'package:pdf_oxide/pdf_oxide.dart';
final doc = PdfDocument.open('scanned-report.pdf');
final engine = OcrEngine.create('det.onnx', 'rec.onnx', 'dict.txt');
for (var i = 0; i < doc.pageCount; i++) {
final text = doc.pageNeedsOcr(i)
? doc.ocrExtractText(i, engine) // scanned / hybrid → OCR
: doc.toMarkdown(i); // native → Markdown
print('--- Page ${i + 1} ---\n$text');
}
engine.close();
doc.close();
R
library(pdfoxide)
doc <- pdf_open("scanned-report.pdf")
engine <- pdf_ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
for (i in seq_len(pdf_page_count(doc)) - 1) {
text <- if (pdf_ocr_page_needs_ocr(doc, i)) {
pdf_ocr_extract_text(doc, i, engine) # scanned / hybrid -> OCR
} else {
pdf_to_markdown(doc, i) # native -> Markdown
}
cat(sprintf("--- Page %d ---\n%s\n", i + 1, text))
}
Julia
using PdfOxide
doc = open_document("scanned-report.pdf")
engine = ocr_engine_create("det.onnx", "rec.onnx", "dict.txt")
for i in 0:(page_count(doc) - 1)
text = page_needs_ocr(doc, i) ?
ocr_extract_text(doc, i, engine) : # scanned / hybrid -> OCR
to_markdown(doc, i) # native -> Markdown
println("--- Page $(i + 1) ---\n$text")
end
Zig
const pdf_oxide = @import("pdf_oxide");
const a = std.heap.page_allocator;
var doc = try pdf_oxide.Document.open("scanned-report.pdf");
defer doc.deinit();
var engine = try pdf_oxide.OcrEngine.create("det.onnx", "rec.onnx", "dict.txt");
defer engine.deinit();
var i: i32 = 0;
const n = try doc.pageCount();
while (i < n) : (i += 1) {
const text = if (try doc.ocrPageNeedsOcr(i))
try doc.ocrExtractText(a, i, engine) // scanned / hybrid → OCR
else
try doc.toMarkdown(a, i); // native → Markdown
defer a.free(text);
std.debug.print("--- Page {d} ---\n{s}\n", .{ i + 1, text });
}
Scala
import fyi.oxide.pdf.PdfDocument
val doc = PdfDocument.open("scanned-report.pdf")
for (i <- 0 until doc.pageCount) {
var md = doc.toMarkdown(i)
if (md.trim.length < 50) {
// Scanned page — auto-routing returns OCR text (plain).
md = doc.extractTextAuto(i)
}
println(s"--- Page ${i + 1} ---\n$md")
}
doc.close()
Clojure
(require '[pdf-oxide.core :as pdf])
(with-open [doc (pdf/open "scanned-report.pdf")]
;; The AutoExtractor routes scanned pages through OCR automatically.
(println (pdf/auto-text (pdf/auto-extractor doc))))
Objective-C
#import "POXPdfOxide.h"
NSError *err = nil;
POXDocument *doc = [POXDocument openPath:@"scanned-report.pdf" error:&err];
POXOcrEngine *engine = [POXOcrEngine createWithDetModelPath:@"det.onnx"
recModelPath:@"rec.onnx"
dictPath:@"dict.txt"
error:&err];
NSInteger n = [doc pageCountError:&err];
for (NSInteger i = 0; i < n; i++) {
NSString *text = [doc pageNeedsOcr:i error:&err]
? [doc ocrExtractText:i engine:engine error:&err] // scanned / hybrid → OCR
: [doc toMarkdown:i error:&err]; // native → Markdown
NSLog(@"--- Page %ld ---\n%@", (long)(i + 1), text);
}
Elixir
{:ok, doc} = PdfOxide.open("scanned-report.pdf")
{:ok, engine} = PdfOxide.ocr_engine("det.onnx", "rec.onnx", "dict.txt")
{:ok, n} = PdfOxide.page_count(doc)
for i <- 0..(n - 1) do
{:ok, text} =
case PdfOxide.ocr_page_needs_ocr(doc, i) do
{:ok, true} -> PdfOxide.ocr_extract_text(doc, i, engine) # scanned / hybrid -> OCR
_ -> PdfOxide.to_markdown(doc, i) # native -> Markdown
end
IO.puts("--- Page #{i + 1} ---\n#{text}")
end
Производительность
OCR значительно медленнее извлечения текста:
| Операция | Типичная скорость |
|---|---|
| Извлечение текста | 0.8 мс на страницу |
| OCR (v3/v4) | 200–1000 мс на страницу |
| OCR (v5 сервер) | 500–2000 мс на страницу |
Скорость OCR зависит от сложности страницы, разрешения изображения, плотности текста и версии модели. PP-OCRv5 медленнее, но точнее. Для больших пакетов рассмотрите параллельную обработку (см. раздел «Пакетная обработка OCR» выше).
Загрузка моделей из байтов (Rust)
use pdf_oxide::ocr::{OcrEngine, OcrConfig};
let det_bytes = std::fs::read("models/det.onnx")?;
let rec_bytes = std::fs::read("models/rec.onnx")?;
let dict = std::fs::read_to_string("models/dict.txt")?;
let engine = OcrEngine::from_bytes(&det_bytes, &rec_bytes, &dict, OcrConfig::default())?;
Связанные страницы
- Извлечение текста — стандартное извлечение текста
- Конвертация в Markdown — Markdown с определением заголовков
- Рендеринг страниц — рендеринг страниц в изображения (используется в OCR внутри)
- Пакетная обработка — паттерны параллельной обработки
- Извлечение текста из PDF — руководство по извлечению текста