Zum Hauptinhalt springen
DudoxxSentinel
Anmelden

Benchmarks

Was der letzte Lauf gemessen hat

80 synthetische Testseiten: 10 Registerformulare, jedes in 8 Seitenqualitäten. Gelaufen auf dem Live-System am 17. Oktober 2026, ein Lauf. Nur synthetische Testformulare, letzter Lauf.

Kennzahlen

Zahlen, keine Versprechen

Jede Zahl ist eine Anzahl Felder aus diesem einen Lauf, insgesamt 1.272 Felder. Wo ein Prozentwert steht, steht er neben der Anzahl.

  • Richtig gelesen

    1.228 von 1.272

    96,5 % aller Felder wurden richtig gelesen, über alle 8 Seitenqualitäten.

  • Falscher Wert übernommen

    1

    1 von 1.272 Feldern, etwa 1 von 1.000. Jedes andere zweifelhafte Feld ging stattdessen an eine Person.

  • An eine Person gegeben

    43

    3,4 % aller Felder gingen an eine prüfende Person, jeweils mit dem Bildausschnitt der genauen Stelle auf der Seite.

  • Übersehene Felder

    0

    Kein Feld wurde ohne Entscheidung übergangen: Jedes wurde gelesen oder an eine Person gegeben.

  • Bildausschnitt an der richtigen Stelle

    1.271 von 1.272

    Die prüfende Person sieht den richtigen Teil der Seite, auch bei fotografierten Seiten.

Nach Seitenqualität

Vom sauberen Druck bis zur geknickten, fotografierten Seite

Die 159 Felder je Qualität stammen aus denselben zehn Formularen, jeweils anders gedruckt oder erfasst.

Richtig gelesene Felder und übernommene falsche Werte für jede der acht Seitenqualitäten
SeitenqualitätRichtig von 159Falscher Wert übernommen
Sauberer Druck156 von 1590
Heller Druck155 von 1590
Bürogerät-Scan147 von 1591
Fax151 von 1590
Im Einzug geknickt155 von 1590
Am Falz geknickt155 von 1590
Von Hand fotografiert155 von 1590
Flachbett mit Wölbung154 von 1590

Anzahlen aus einem Lauf mit synthetischen Testformularen. Ein übernommener falscher Wert ist ein Wert, der weder richtig war noch an eine Person ging.

So optimieren wir die Extraktion

Ein Kreislauf, den wir bei jeder Änderung wiederholen

Eine Leseengine zu verbessern ist Messarbeit. Jede Änderung durchläuft denselben Kreislauf, bevor sie Sie erreicht.

  1. Feste Testsätze mit bekannten Antworten

    Registerformulare in jeder Seitenqualität: sauberer Druck, Scans, Fax und Fotos. Wir kennen die richtige Antwort für jedes Feld.

  2. Jede Änderung zuerst gemessen

    Eine Änderung wird auf denselben Seiten getestet wie die vorherige und geht nur live, wenn die Zahlen halten.

  3. Drei Werte, getrennt

    Wurde das Feld gefunden, wurde der Wert richtig gelesen, wurde es auf der Seite richtig verortet. Ein guter Wert verdeckt nie einen schwachen anderen.

  4. Zweifel geht an eine Person

    Wir tauschen nie einen falschen Wert gegen Vollständigkeit. Ein unsicheres Feld bleibt für eine Person offen, mit dem Bildausschnitt zur Prüfung.

  5. Ein versiegelter Satz für die Endprüfung

    Seiten, die beim Optimieren ungesehen bleiben, werden einmal am Ende genutzt. Für den letzten Lauf steht dieser Satz noch aus, und das sagen wir unten offen.

  6. Danach Live-Läufe

    Dieselben Seiten laufen durch das Produktivsystem, die Zahlen beschreiben also, was Sie bekommen würden, nicht einen Laboraufbau.

Dann beginnt der Kreislauf von vorn: Die nächste Änderung wird am letzten Ergebnis gemessen.

Eine Woche Engine-Schritte

Wie die Engine hierher kam

Raten auf unserem Testsatz mit 48 Seiten nach jedem Schritt am 12. und 13. Oktober, danach Anzahlen aus den Live-Läufen am 16. und 17. Oktober.

  1. 12. Oktober

    Ausgangspunkt

    Jedes Feld wird gelesen, nichts wird zurückgehalten.

    Verortet
    58,4 %
    Falscher Wert übernommen
    18,1 %
    An eine Person gegeben
    10,9 %
  2. 12. Oktober

    Zurückhalten statt raten

    Ein Feld wird nur übernommen, wenn die Prüfungen übereinstimmen. Falsche Werte sinken stark, mehr Felder gehen an eine Person.

    Verortet
    58,3 %
    Falscher Wert übernommen
    0,4 %
    An eine Person gegeben
    40,1 %
  3. 12. Oktober

    Jedes Feld wird auf dem leeren Formular gefunden

    Die Seite wird mit dem leeren Formular abgeglichen, sodass die Position jedes Felds bekannt ist.

    Verortet
    92,1 %
    Falscher Wert übernommen
    0,5 %
    An eine Person gegeben
    40,9 %
  4. 13. Oktober

    Geführtes Lesen der Felder

    Dem Leser wird gesagt, welche Felder das Formular enthält, und er liest nur diese.

    Verortet
    92,0 %
    Falscher Wert übernommen
    0,1 %
    An eine Person gegeben
    32,9 %
  5. 13. Oktober

    Quergeprüftes Lesen

    Ein zweifelhaftes Feld gilt erst als entschieden, wenn getrennte Prüfungen übereinstimmen; sonst geht es an einen Menschen.

    Verortet
    92,2 %
    Falscher Wert übernommen
    0,1 %
    An eine Person gegeben
    15,7 %
  6. 16. und 17. Oktober

    Live-Läufe

    80 synthetische Seiten auf dem Produktivsystem. Anzahlen statt Raten.

    Verortet
    1.271 von 1.272
    Falscher Wert übernommen
    1 von 1.272
    An eine Person gegeben
    43 von 1.272

Der Bildausschnitt an der richtigen Stelle stieg von 2 % der Felder bei der ersten Messung am 12. Oktober (5 Dokumente) auf 1.271 von 1.272 Feldern auf dem Live-System.

Schritte bis 13. Oktober: 48 synthetische Testseiten, Mittel aus 5 Läufen. Erste Messung und Live-Läufe nutzen unterschiedliche Testseiten, lesen Sie daher jede Zeile für sich.

Fortschritt

Besser an einem Tag

Dieselben 80 Testseiten, nach jeder Verbesserung auf dem Live-System gemessen.

Richtige Felder, übernommene falsche Werte und gesetzte Bildausschnitte in drei Schritten zwischen dem 16. und 17. Oktober
SchrittRichtigFalscher Wert übernommenBildausschnitt gesetzt
Neuer Leseschritt16. Oktober1.199 von 1.272 (94,3 %)151.187 von 1.272
Verfeinerungen beim Lesen17. Oktober, vormittags1.216 von 1.272 (95,6 %)141.254 von 1.272
Zusätzliche Prüfung jedes übernommenen Textfelds17. Oktober, nachmittags1.228 von 1.272 (96,5 %)11.271 von 1.272

An einem Tag sank die Zahl übernommener falscher Werte von 14 auf 1 bei 1.272 Feldern, und der Bildausschnitt sitzt nun auch bei fotografierten Seiten an der richtigen Stelle.

Auf dem Bildschirm

Die Live-Ansichten hinter den Zahlen

Dieselben Zahlen, wie sie in Sentinel erscheinen: der Verlauf über drei Live-Läufe und die Qualität jedes Schritts.

  • Der Statistikbildschirm von Sentinel: ein Liniendiagramm der Qualitätsraten über drei Live-Schritte der Engine.

    Jede Verbesserung Schritt für Schritt verfolgen

    Jede Verbesserung wird gleich gemessen. So sehen Sie, was sich geändert hat und um wie viel.

  • Die Tabelle der Engine-Nachweise von Sentinel: drei Live-Läufe auf 80 Testseiten mit Präzision übernommener Antworten, gefundenen Feldern, übernommenen Fehlwerten und zur Prüfung gesendeten Antworten.

    Die Qualität sehen, bevor Sie ihr vertrauen

    Jede Verbesserung wird auf denselben 80 synthetischen Testseiten gemessen: wie viele übernommene Antworten stimmen, wie oft der Bildausschnitt an der richtigen Stelle sitzt und wie viele Felder an einen Menschen gehen.

Leserouten

Die passende Route für jeden Formulartyp

Sentinel kann eine Seite auf mehreren Wegen lesen. Wir wählen eine Route je Formulartyp, und jede wird vor dem Livegang gemessen.

  • Standardroute

    Der Standard für die meisten Formulare: Jedes Feld wird auf dem leeren Formular gefunden und mit Prüfungen gelesen.

  • Alternativroute

    Eine andere Art zu lesen, vorgesehen für Formulartypen, bei denen sie auf unseren Testseiten besser abschneidet.

  • Ankreuzraster

    Für Formulare ohne leere Vorlage: Ankreuzraster werden direkt auf der Seite gefunden, ein neues Formular lässt sich also ohne Vorbereitung verarbeiten.

  • Kombinierte Route, in Erprobung

    Routen, die auf derselben Seite arbeiten und ein Feld an eine Person geben, wenn sie sich widersprechen. Wählbar, noch nicht der Standard.

Belege im großen Maßstab

Gemessen, nicht behauptet

2.856 Seiten in 69 Benchmark-Läufen über 12 Engine-Schritte bewertet, alle auf synthetischen Testseiten.

  • Bewertete Seiten

    2.856

  • Benchmark-Läufe

    69

  • Engine-Schritte

    12

  • Jahre Dudoxx-F&E

    4

  • Feinabgestimmte, trainierte und optimierte agentische LLM-Pipeline von Dudoxx

    Von Dudoxx für Formulare und Register entwickelt und abgestimmt.

  • Teil der Dudoxx AI HMS Plattform

    Sentinel ist der Forschungs- und Register-Zugang der Plattform.

  • Auf unseren Servern in Deutschland oder auf Ihren

    Sie entscheiden, wo Ihre Seiten verarbeitet werden.

  • Ihre Daten trainieren nie ein Modell

    Ihre Seiten und Ergebnisse bleiben Ihre.

So lesen Sie das

Was dieser Lauf zeigt und was nicht

Wir nennen die Grenzen neben den Zahlen, damit Sie sie selbst beurteilen können.

  • Synthetische Testformulare

    Jede Seite in diesem Lauf ist ein synthetisches Testformular. Es wurden keine echten Patientenseiten verwendet.

  • Noch kein versiegelter Prüfsatz

    Die Testseiten wurden genutzt, während wir das System verbessert haben. Ein versiegelter Satz ungesehener Seiten steht noch aus.

  • Ihre eigenen Formulare, im Pilot

    Ergebnisse auf Ihren Formularen werden in einem Pilot an einer Stichprobe Ihrer eigenen Seiten bestätigt, bevor etwas in den Alltag geht.

  • Zweifel geht an eine Person

    Ein falscher Wert ist schlimmer als ein leeres Feld. Wo Sentinel nicht sicher ist, lässt es das Feld für eine Person offen und zeigt den Bildausschnitt zur Prüfung.

Mit Ihren eigenen Formularen ansehen

Erzählen Sie uns von Ihren Formularen und Ihrem Volumen. Wir bestätigen die Ergebnisse an einer Stichprobe Ihrer Seiten.