Advanced RAG: Wie KI Tabellen und Rechnungen fehlerfrei versteht

Die automatisierte Beantwortung von Fragen aus internen Dokumenten via Retrieval-Augmented Generation (RAG) ist ein riesiger Effizienzhebel.

Doch Standard-Systeme scheitern regelmäßig an geschäftskritischen Strukturen wie verschachtelten Tabellen, Grafiken und Rechnungen.  

Klassische Text-Chunker zerlegen Dokumente starr nach Zeichenlänge. Geometrische Beziehungen (Zeile-Spalte) werden dabei in einen eindimensionalen Textstrom gepresst. Ohne Spaltenüberschriften verliert die KI den Kontext: Zahlenwerte hängen in der Luft, was in produktiven Systemen zu falschen Daten und Halluzinationen führt.  In unserem aktuellen Whitepaper stellen wir drei praxiserprobte Lösungsarchitekturen vor, um dieses Defizit zu beheben:  

  • Visuelles Retrieval (ColPali-Paradigma): Dieser Ansatz verzichtet komplett auf fehleranfällige Textextraktion (OCR). Jede PDF-Seite wird als Bildmatrix verarbeitet. Suchanfragen werden direkt mit visuellen Elementen (wie Tabellenköpfen oder Summenlinien) über deren räumliche Anordnung abgeglichen. Die generative KI analysiert anschließend direkt das hochauflösende Bild.  
  • Multi-Vector-Retrieval & HTML-Injektion: Tabellen und Diagramme werden sauber isoliert und für die Suche textuell zusammengefasst. Im Hintergrund wird die Tabelle jedoch als HTML-Code gespeichert. Untersuchungen im rms. LLM-Lab zeigen, dass Sprachmodelle native HTML-Tabellen mit einer um bis zu 32 % höheren Präzision verarbeiten als CSV-Formate, da die logische Struktur optimal erhalten bleibt.  
  • Hybride Suche für Rechnungen: Bei Finanzdaten sind statistische Näherungswerte gefährlich. Jede Rechnung wird daher via JSON-Schema in exakte Metadaten (z. B. Betrag, Lieferant) überführt. Das System filtert die Datenbank bei einer Anfrage zunächst deterministisch vor , bevor die mathematische Ähnlichkeitssuche auf dieser exakten Teilmenge operiert – das schließt falsche Ergebnisse aus.  

Der optimierte Enterprise Tech-Stack

Um diese Pipelines in der Praxis umzusetzen (wie bereits für die KI-Suche bei KW Voerde oder den Slack-Bot von Solarize realisiert), setzen wir auf ein aufeinander abgestimmtes Ökosystem:
Für das präzise Parsing kommen Werkzeuge wie Kreuzberg-PDF, Tesseract und PaddleOCR zum Einsatz. Als Vektordatenbank dient ChromaDB, während die Orchestrierung über LangChain und LangGraph gesteuert wird. Ein zweistufiges Post-Retrieval-Verfahren – bestehend aus einem RRF-Algorithmus und einem tiefen Cross-Encoder-Reranking (z. B. via Jina oder IONOS Qwen3-VL) – filtert mathematisches Rauschen heraus, sodass nur die Top-5-Dokumente im Kontextfenster der KI landen.  

Fazit 

Wer historische PDF-Bestände in mathematisch präzise und auditierbare Wissensnetzwerke verwandeln will, muss Layout-Awareness und hybride Filterverfahren fest in seiner Software-Architektur verankern. 

Download Whitepaper