Коротко
- Официальный пайплайн (разметка страницы + отдельный запрос на каждый регион) — 0.29. Вся страница одним запросом — 0.07.
- Даже в лучшем режиме вдвое ниже классического PaddleOCR.
- 23 секунды на страницу в официальном пайплайне.
Как запускали
vLLM v0.20.1, около 7.8 ГБ видеопамяти. Официальный SDK glmocr: PP-DocLayoutV3 на CPU режет страницу на регионы, каждый уходит отдельным запросом с промптом Text Recognition:. Декодирование как в SDK: temperature 0, repetition_penalty 1.1.
Что важно знать
- Почему вся страница проваливается: на целую страницу нужно 3–5 тысяч токенов ответа, и модель всегда упирается в лимит и уходит в повтор. На отдельном регионе ответ короткий и заканчивается сам.
- Почему регионы не спасают: модель уверенно читает чистый крупный текст и синтетику, но на реальных сканах большая часть регионов — выдумка. Разрешение ни при чём: увеличение страницы в 2–2.8 раза и бинаризация не помогли.
- Принимает только свои задачи (
Text Recognition:,Table Recognition:,Formula Recognition:). Произвольные инструкции ломают ответ. - Видео-модальность при запуске надо отключать (
"video": 0), иначе vLLM съедает оперативную память хоста при профилировании.
Когда брать
Для русских документов — нет.
По типам страниц
Синяя полоса — GLM-OCR, серая — медиана всех 20 моделей лидерборда на том же типе.
Распределение по страницам
Сколько страниц попало в каждый диапазон балла. Красным — почти полный провал (ниже 0.2).
Все прогоны
| Вариант | Все | Печатные | Рукопись | Дата |
|---|---|---|---|---|
официальный SDK-пайплайн, без markdown в лидербордеresults/glm-ocr-sdk-clean |
0.294 | 0.335 | 0.171 | 15.09.2026 |
официальный SDK-пайплайнresults/glm-ocr-sdk |
0.293 | 0.334 | 0.172 | 15.09.2026 |
вся страница одним запросомresults/glm-ocr |
0.074 | 0.082 | 0.050 | 15.09.2026 |
Где модель ошибается
Страницы с самым низким баллом в основном прогоне: две печатные и одна рукописная. Слева эталон, справа ответ модели (первые 700 знаков).
Страница 1145 · без метки · балл 0.091
Эталон
Первый Санкт-Петербургский государственный медицинский университет им. акад. И.П.Павлова Отдел функциональной диагностики легких клиники госпитальной терапии им. М.В.Черноруцкого. 197098, Санкт-Петербург, ул. Л. Толстого, 6/8, тел. 3387829 ИССЛЕДОВАНИЕ ДЫХАТЕЛЬНОЙ ФУНКЦИИ ЛЕГКИХ ======================================= Дата обследования: 30.10.2015 Пол: Ж Возраст: | Параметр | Должные | Исходные величины | После вентолина | Измен. | |-------------------|---------|-------------------|-----------------|--------| | | Клемент Р. и др. 84 г., 94 г. | Фактич. | % в дол. | Фактич. | % в дол. | % | | Статические легочные объемы | | | | | | | | ОЕЛ (л) | 4,73 | 5,18 | 109,8 | Н | 5,63 | 119,1 | У | …
GLM-OCR
Первый Санкт-Петербургский государственный медицинский университет им. академический университет им. академия наук Одефизрассы Оденгийского университета имени И.И.Павелюн. М.В.Чернога Санкт-Петербург И.Н.Павловая и М.Павилова М.Павлесса М.Павиллюсв г.России М.Петербургской области ИНординская область Петербургской области Издесь ИНевропедагогического университета Испецика М.Петербургского университета ИНорга И.Петербургского университета И.Петербургского университета И.Петербургского университета И.Петербургского университета И.Петербургского университета И.Петербургского университета ИНепржа И.Петербургского района московского края И.Петербургского района первиспромышленного учреждения Импе …
Страница 1233 · скан или фото печатного · балл 0.094
Эталон
Совершенствование физических качеств средствами баскетбола. Виды защиты в баскетболе: зональная и индивидуальная. Технические действия: отбор мяча, перехват мяча. Броски мяча в корзину с разных дистанций. Выполнение зачетных нормативов и тестов.
Особенности занятий адаптивной физической культурой средствами баскетбола. Правила соревнований по стритболу и мини-баскетболу. Технические приемы в стритболе и мини-баскетболе: подача мяча, прием и передача мяча. Требования к физическим качествам баскетболиста.
Практика судейства соревнований по баскетболу. Судейские жесты в баскетболе. Составление документации для проведения соревнований по баскетболу. Судейство со …GLM-OCR
Соевременное значение функции ключа качества крепления к качествования фиксирования на основе значений данных. Вызов в этом случае является важным factorом в программистой задачи, которая позволяет использовать методы вычисления значения значения значения значения параметров в программирования. В результате выполнения программы.
Обоевищем значения знаний знаний знаний знаний демонстрирует факт изменения значений фиксировки значений функций уравнений квадрата. Показано в таблице значений значений функции $f(x)$
Обе значений значений $x$ и переменных значений $x$.
Пусть $f(x) = \frac{1}{2}$
Wait, the table has a row with $x=0$.
Let's re-read the first line.
$Observation 1:$ Observation 1 …
Страница 1070 · рукопись · балл 0.052
Эталон
М. Цветаева Вы, чьи широкие шинели, Напоминали паруса, Чьи шпоры весело звенели И голоса. И чьи глаза, как бриллианты, На сердце оставляли след, - Очаровательные франты Минувших лет. Одним ожесточеньем воли Вы брали сердце и скалу - Цари на каждом бранном поле И на балу. Вам все вершины были малы И мягок самый черствый хлеб, О, молодые генералы Своих судеб! О, как мне кажется, могли б вы Рукою, полною перстней, И кудри дев ласкать, и гривы - Своих коней. В одной невероятной скачке Вы прожили свой краткий век… И ваши кудри, ваши бачки Засыпал снег. Вы побеждали и любили Любовь и сабли острие... И весело переходили В небытье... <Генералам войны 12 года>
GLM-OCR
M. Убемаева 134, 161, 161, 161, 161, 16 ироке шиспокреса и сме на рис. 10, 18, 16, 16, 16, 16, 16, 16, 16, 1, 1, 16, 1, 16, 1, 1, 1, 1 186 ушок без нее не может быть 1965. и ты ша, как отрицательный, На срочно, не вставьте, что напряду иначе. Ожини опасности вам повящим опасными в этом месте повыть повязывать на него поменять не так, что вы не следует найти в сторону другими словами нести сначала последующей перед тем, что представить внутри переменя первой прочерезультатурами проститься в том, что просто пустой против пользоваться посредством провединицифункцией признакомства претулесли прочие программы предисправления пределяться в системе программ п …