ClaimPilot pripraví rozhodnutie o cestovnej poistnej udalosti, ktoré likvidátor len skontroluje a schváli: vytiahne údaje z dokladov v šiestich jazykoch, priradí ich k poistným podmienkam, vypočíta plnenie a napíše list. V teste správne prečíta 99,3 % kritických údajov.
Verejný portfóliový projekt. Beží celý na jednom počítači s lokálnymi modelmi, len na syntetických dátach.
Problém
Likvidátor pri každej udalosti prepisuje sumy, dátumy a diagnózy z lekárskych správ, faktúr a potvrdení od leteckých spoločností, hľadá zodpovedajúce články poistných podmienok a počíta plnenie. Osobné údaje pritom nesmú odísť k externému modelu.
Riešenie
Pred každým volaním modelu sa mená, rodné čísla, IBAN a adresy nahradia tokenmi. Pravidlá bežia pred modelmi, modely čítajú a triedia a sumy, limity, spoluúčasti a kurzy počíta Python. Každá hodnota je prepojená s miestom v dokumente, kde bola prečítaná, a likvidátor schvaľuje každé rozhodnutie.
Výsledky
- Kritické údaje (sumy, dátumy, číslo poistky, IBAN, diagnóza): 99,3 % správne v teste
- Typ dokumentu 98,7 %, plnenie na cent presne 88,9 %
- Listy: 0 vymyslených čísel, dátumov či článkov v 54 textoch
- Pokyny podstrčené v dokumentoch nezmenili ani jedno rozhodnutie
Stack
- Python, FastAPI, Next.js
- Ollama: Qwen3 30B-A3B, Qwen3-VL 8B, bge-m3
- Postgres + pgvector, Redis
- Evaluácia na 40 vývojových a 20 testovacích udalostiach
Čo som sa naučil
V testovacej sade jedno meno lekára na podpisovom riadku prekĺzlo cez anonymizáciu, preto pribudol ďalší detektor podľa popisu poľa. Model s architektúrou mixture-of-experts dosiahol rovnakú presnosť ako menší model a bol 2,4-krát rýchlejší: voľbu modelu treba merať, nie hádať.