MethodikSo messen wir Subsumio.
So messen wir Subsumio.
Offen und nachprüfbar.
Wie die Suche arbeitet – und warum wir derzeit keine Trefferquote veröffentlichen.
Kennzahlen
Was wir messen und was nicht
Derzeit keine veröffentlichte Kennzahl
Wir nennen eine Trefferquote erst, wenn ein nachprüfbares Messprotokoll mit der Konfiguration vorliegt, mit der Subsumio tatsächlich arbeitet – Datum, Version, Suchverfahren und Ergebnisse je Frage. Bis dahin beschreiben wir hier, wie die Suche arbeitet und wie Sie Antworten selbst prüfen.
Was eine Trefferquote nicht sagt
- Allgemeine Tests für KI-Gedächtnis sind keine juristischen Tests; ihre Fragen stammen nicht aus österreichischen oder deutschen Akten.
- Eine Trefferquote misst das Auffinden der richtigen Textstelle — nicht die Qualität der daraus formulierten Antwort und nicht ihre rechtliche Richtigkeit.
- Auf Ihren Akten können Ergebnisse abweichen, etwa bei schlecht lesbaren Scans oder sehr ähnlichen Dokumenten.
- Jede Antwort nennt ihre Quelle, damit Sie sie am Original nachsehen; die Entscheidung treffen Sie.
So arbeitet die Suche
- Suche: Sinnsuche (Embeddings) und Stichwortsuche werden kombiniert und um die erkannten Zusammenhänge zwischen Personen, Akten und Dokumenten ergänzt.
- Fundstellen: Antworten verweisen auf Dokument und Stelle bzw. auf die Gesetzesstelle; Zitate werden gegen die hinterlegten Rechtsquellen geprüft, nicht Belegtes wird gekennzeichnet.
- Lücken: Findet die Suche nichts Passendes, sagt der Assistent das, statt eine unbelegte Antwort zu geben.
Sehen Sie es an Ihren eigenen Akten.
Starten Sie Ihre 30-tägige Testphase — keine Kreditkarte nötig.