Как и зачем мы сделали собственный OCR-бенчмаркОднажды нам понадобилось выбрать OCR-модель для RAG-пайплайна. Казалось бы, задача простая: смотришь на лидерборды, берешь лучшую, PROFIT. Но быстро выяснилось, что, во-первых, то, что прекрасно срабатывает на каких-нибудь английских юридических документах, может не потянуть такие штуки как научные формулы, паспортные данные и таблицы на русском языке. А во-вторых, даже если крутой по всем параметрам бенчмарк для оценки качества распознавания говорит, «всё прочитали правильно, я проверил», точность ответов пользователю, который совершает запрос к чат-боту с RAG под капотом, может страдать. Почему так происходит, зачем мы потратили время на сборку собственного OCR-бенчмарка и пожалели ли мы об этом, рассказываю дальше.https://habr.com/ru/companies/cloud_ru/articles/1043144/#ocr #rag #LLM #deepseek #glm #markdown #векторный_поиск #data_science #computer_vision
Related
Qian Liu et al. developed a two-step #MachineLearning-based framework for estimating forest aboveground #Carbon, #Nitrog...
Qian Liu et al. developed a two-step #MachineLearning-based framework for estimating forest aboveground #Carbon, #Nitrogen and #Phosphorus stocks by integrating field measurements,...
🎮 Denshattack! reviewSaturated spectacle can't mask this energetic game's flawsSurprisingly lacking in the train and tri...
🎮 Denshattack! reviewSaturated spectacle can't mask this energetic game's flawsSurprisingly lacking in the train and trick departments.📰 Source: Latest from PC Gamer🔗 Link: https:/...
The Motorola Edge 70 Max is all about powerMotorola has launched the Edge 70 Max, its latest flagship phone that's desig...
The Motorola Edge 70 Max is all about powerMotorola has launched the Edge 70 Max, its latest flagship phone that's designed for power intensive tasks like streaming video and mobil...