AI Work

KI-OCR: Wie KI Rechnungen, Formulare und Scans liest

Texterkennung (OCR) mit KI erklärt: klassische OCR, Dokument-KI und Vision-LLMs im Vergleich, was die OCR-Benchmarks 2026 zeigen, typische Fehler und nötige Prüfungen.

Von 7 Min. Lesezeit
Texterkennung (OCR) mit KI erklärt: klassische OCR, Dokument-KI und Vision-LLMs im Vergleich, was die OCR-Benchmarks 2026 zeigen, typische Fehler und nötige Prüfungen.

Rechnungen, Lieferscheine, Verträge, Formulare: Viele Geschäftsdaten kommen noch auf Papier oder als gescanntes PDF an. OCR (Optical Character Recognition, Texterkennung) macht aus diesen Bildern Text, mit dem Software arbeiten kann. Mit KI kann OCR weit mehr als Buchstaben lesen. Sie findet die Rechnungsnummer, zerlegt eine Tabelle in Zeilen und füllt einen Buchungssatz aus. Das spart Stunden an Abtipparbeit — bringt aber eine neue Art Fehler mit: eine, die vollkommen plausibel aussieht.

Dieser Leitfaden erklärt die drei Arten von OCR, was die aktuellen OCR-Benchmarks zeigen, wo OCR mit KI danebenliegt und welche Prüfungen die Fehler abfangen. Am Ende steht ein Fall, in dem Sie gar keine OCR brauchen.

Drei Arten von OCR

Drei Spalten: Klassische OCR liefert reinen Text und braucht Vorlagen, Dokument-KI findet Layout, Tabellen und Felder mit einer Sicherheit je Feld, Vision-LLMs lesen ganze Seiten, können Unlesbares aber erfinden
Je weiter rechts, desto mehr versteht das System — und desto mehr müssen Sie prüfen.

Klassische OCR erkennt Zeichen an ihrer Form und liefert reinen Text. Tesseract, eine Open-Source-Engine, die bei HP entstand und später von Google gefördert wurde, ist das bekannteste Beispiel; die meisten Scanner und PDF-Programme haben eine OCR-Funktion eingebaut. Klassische OCR ist schnell und läuft auf jedem Rechner, weiß aber nicht, was sie liest: Um einen Betrag aus einer Rechnung zu ziehen, muss jemand festlegen, wo dieser Betrag auf jedem Layout steht.

Dokument-KI-Dienste ergänzen eine Layout-Analyse und vortrainierte Modelle für gängige Dokumenttypen. Google Document AI, Azure AI Document Intelligence von Microsoft und Amazon Textract erkennen Rechnungen, Belege oder Ausweise, liefern benannte Felder wie „Rechnungsdatum“ oder „Gesamtbetrag“ und geben für jedes Feld eine Sicherheit an. Auf den Dokumenttypen, für die sie trainiert sind, arbeiten sie zuverlässig.

Vision-Sprachmodelle (Vision-LLMs) lesen eine Seite als Bild und verstehen sie im Zusammenhang. Sie können Markdown verlangen, JSON mit genau den Feldern, die Sie brauchen, oder eine Antwort auf eine Frage zum Dokument. Zu dieser Gruppe gehören allgemeine Modelle wie Gemini, GPT oder Qwen-VL und spezialisierte Dokument-Parser wie PaddleOCR-VL von Baidu, MinerU vom Shanghai AI Laboratory und olmOCR vom Allen Institute for AI — klein genug für den eigenen Server.

KI-OCR: Wie KI Rechnungen, Formulare und Scans liest
Klassische OCRDokument-KIVision-LLM
AusgabeReiner Text, oft mit PositionBenannte Felder und Tabellen, mit SicherheitText, Markdown oder JSON in beliebiger Struktur
StärkenSchnell, günstig, läuft lokalZuverlässig bei StandarddokumentenNeue Layouts ohne Einrichtung
SchwächenFür Felder eine Vorlage je Layout nötigSchwächer bei untrainierten DokumenttypenKann Text erfinden, der nicht auf der Seite steht
Typischer EinsatzDurchsuchbare Archive, einfache ScansRechnungen, Belege, Ausweise in MengeGemischte Dokumente, Eingabe für KI-Abläufe

Wie KI-OCR aus einem Scan Daten macht

Fünf Schritte von links nach rechts: erfassen, Layout, lesen, strukturieren und prüfen; danach Export in Buchhaltung, ERP oder Ablage
Vom Scan zum Datensatz. Die Prüfung gehört zum Ablauf, sie ist kein Extra.

Jeder OCR-Ablauf durchläuft dieselben Schritte. Die Qualität des ersten begrenzt alle weiteren: Ein schiefes Handyfoto oder eine Faxkopie erzeugt in jedem späteren Schritt mehr Fehler — scannen Sie daher in guter Auflösung und richten Sie Seiten vor der Verarbeitung gerade aus. Danach findet das System das Layout (Spalten, Tabellen, Stempel), liest den Text, ordnet ihn Feldern wie Betrag, Datum und Bankverbindung zu und prüft das Ergebnis, bevor es in die Buchhaltung, ein ERP-System oder die Ablage geht. Der letzte Schritt entscheidet, ob OCR Zeit spart oder die Arbeit nur zu der Person verschiebt, die später die Fehler korrigiert.

Was die OCR-Benchmarks 2026 zeigen

Anbieter veröffentlichen Genauigkeitswerte auf eigenen Testdokumenten, das erschwert einen OCR-Vergleich. Zwei offene Benchmarks prüfen viele Systeme auf denselben Seiten.

OmniDocBench vom Shanghai AI Laboratory (vorgestellt auf der CVPR 2025) umfasst 1.651 PDF-Seiten aus 10 Dokumenttypen, darunter Fachartikel, Lehrbücher, Folien, Finanzberichte, Zeitungen und handschriftliche Notizen. Bewertet werden Text, Formeln, Tabellen und Lesereihenfolge zusammen. Ausgewählte Ergebnisse der Rangliste mit Stand 11. September 2026 (Quelle: github.com/opendatalab/OmniDocBench):

KI-OCR: Wie KI Rechnungen, Formulare und Scans liest (2)
SystemArtGesamtwert
TeleOCRSpezialisierter Dokument-Parser96,91
PaddleOCR-VL-1.6Spezialisierter Dokument-Parser96,34
GLM-OCRSpezialisierter Dokument-Parser95,22
Gemini 3 ProAllgemeines Vision-Sprachmodell92,91
Qwen3-VL-235BAllgemeines Vision-Sprachmodell89,78
GPT-5.2Allgemeines Vision-Sprachmodell86,59
MinerU-PipelineKette klassischer Werkzeuge86,47

Die ersten elf Plätze gehen ausnahmslos an spezialisierte Dokument-Parser. Allgemeine LLMs lesen Dokumente gut, aber nicht am besten — und viele der führenden Parser sind offene Modelle, die Sie selbst betreiben können.

olmOCR-Bench vom Allen Institute for AI prüft über 7.000 einfache Fakten auf 1.400 Dokumenten: Steht ein Satz da, stimmt die Lesereihenfolge, steht eine Tabellenzelle unter der richtigen Überschrift? Die besten veröffentlichten Systeme erreichen rund 83 von 100 Punkten; alte Scans mit Formeln, Tabellen und lange Passagen in winziger Schrift sind die schwersten Kategorien (Quelle: github.com/allenai/olmocr). Auch die besten Systeme machen auf schwierigen Seiten noch Fehler — eine Prüfung nach der OCR bleibt also nötig.

Wo OCR mit KI danebenliegt

Klassische OCR scheitert sichtbar: Aus einem verschmierten Wort wird ein Zeichensalat, der jedem auffällt. Vision-LLMs scheitern leise. Ist eine Stelle unlesbar, schreiben sie mitunter etwas, das zum Zusammenhang passt — ein plausibles Datum, einen gerundeten Betrag. Das Allen Institute musste sein eigenes Modell olmOCR korrigieren, weil es auf leeren Seiten Text erfand (Quelle: github.com/allenai/olmocr). Achten Sie besonders auf diese Stellen:

  • Zahlen. Eine falsche Ziffer in Betrag, IBAN oder Rechnungsnummer genügt für eine falsche Zahlung.
  • Tabellen. Zellen rutschen in die Nachbarspalte, vor allem wenn eine Tabelle über zwei Seiten läuft.
  • Handschrift, Stempel und Vermerke. Ein handschriftliches „bezahlt am“ neben dem Gesamtbetrag ändert die Bedeutung des ganzen Dokuments.
  • Personenbezogene Daten. Rechnungen und Formulare enthalten Namen, Anschriften und Bankdaten. Sie an einen Cloud-OCR-Dienst zu senden, ist nach der DSGVO eine Auftragsverarbeitung und braucht einen Vertrag; was Sie vorher klären sollten, steht unter AI Security.

Diese Prüfungen fangen die meisten Fehler ab, bevor sie die Buchhaltung erreichen:

KI-OCR: Wie KI Rechnungen, Formulare und Scans liest (3)
PrüfungWas sie abfängtSo funktioniert sie
SicherheitsschwelleFelder, bei denen das System unsicher istFelder unter einer festen Sicherheit gehen an eine Person
RechenprüfungFalsche BeträgeNetto plus Steuer ergibt brutto; die Positionen ergeben die Summe
PrüfziffernFalsche IBANs und SteuernummernIBANs tragen Prüfziffern, die die meisten Einzelziffer-Fehler verraten
StammdatenFalscher Lieferant oder KundeNamen und Bankdaten mit den eigenen Stammdaten abgleichen
DublettenDoppelte ZahlungenGleiche Rechnungsnummer, gleicher Lieferant, gleicher Betrag schon gesehen
StichprobeFehler, die sich mit der Zeit einschleichenEine Person prüft jede Woche eine Zufallsstichprobe

Saubere Stammdaten machen den Stammdatenabgleich erst möglich. Warum Datenqualität mit KI noch wichtiger wird und wie Sie sie steuern, steht in unserem Leitfaden zum Datenqualitätsmanagement.

E-Rechnungen: wann Sie gar keine OCR brauchen

Die beste OCR ist die, die Sie sich sparen. Eine strukturierte E-Rechnung enthält ihre Daten bereits als Felder; ein Bild davon zu lesen, würde nur Fehler hinzufügen. In Deutschland müssen alle Unternehmen seit dem 1. Januar 2025 strukturierte E-Rechnungen in Formaten wie XRechnung oder ZUGFeRD empfangen können; die Pflicht zum Ausstellen folgt in zwei Stufen 2027 und 2028 (Quelle: Bundesministerium der Finanzen, bundesfinanzministerium.de). Das EU-Paket „Mehrwertsteuer im digitalen Zeitalter“ macht E-Rechnungen ab Juli 2030 auch für grenzüberschreitende Geschäfte zwischen Unternehmen zur Pflicht (Quelle: Rat der EU, consilium.europa.eu). Verarbeiten Sie E-Rechnungen direkt und behalten Sie OCR für Papier, Bild-PDFs und Dokumente von Partnern, die keine strukturierten Daten schicken.

So wählen Sie den passenden OCR-Ansatz

Beginnen Sie bei Ihren Dokumenten, nicht bei der Technik:

KI-OCR: Wie KI Rechnungen, Formulare und Scans liest (4)
FrageWenn ja
Brauchen Sie nur durchsuchbaren Text, etwa für ein Archiv?Klassische OCR genügt, oft schon im Scanner oder PDF-Programm eingebaut
Sind die meisten Dokumente Standardtypen wie Rechnungen und Belege?Ein Dokument-KI-Dienst mit vortrainierten Modellen
Wechseln die Layouts stark, oder brauchen Sie Markdown oder JSON für einen KI-Ablauf?Ein Vision-LLM oder ein spezialisierter Dokument-Parser
Müssen die Dokumente auf eigenen Servern bleiben?Ein offenes Modell wie PaddleOCR-VL oder olmOCR auf eigener Hardware
Verarbeiten Sie Tausende Seiten am Tag?Tempo und Kosten pro Seite mit eigenen Dokumenten vergleichen, bevor Sie entscheiden

Was auch immer Sie wählen: Testen Sie es an 50 eigenen Dokumenten, schlechte Scans und handschriftliche Vermerke eingeschlossen, und zählen Sie Fehler je Feld, nicht je Seite. Unser Vergleich führt 8 Tools für Analyse & Betrieb, darunter DataSnipper, das Dokumente in Prüfung und Finanzwesen ausliest und abgleicht:

Kurzbeschreibungen aus unserem Tool-Vergleich, nach Angaben der Anbieter — nicht von ABXK.AI getestet.