Fünf Stufen des KI-Zugriffs auf ein ERP

„Die KI liest Ihr ERP“ sagt jeder Anbieter in dieser Kategorie, und es beschreibt fünf verschiedene Dinge. Der Abstand zwischen dem ersten und dem fünften ist der Unterschied zwischen einer Vorführung und einem System, das ein Finanzteam benutzen kann.

Nutzen Sie diese Leiter, um jedes Produkt einzuordnen, auch dieses.

Die fünf Stufen

Jede Stufe löst ein Problem, das die Stufe darunter hat. Jede Stufe ist auch aufwendiger zu bauen, und darum hören Produkte auf verschiedenen Sprossen auf.

Stufe 1: Dokument hochladen

Sie exportieren einen Bericht, laden die Datei hoch und stellen Fragen dazu.

Das funktioniert, und es ist für eine einmalige Analyse nützlicher, als es klingt. Es hat zwei Grenzen. Die Daten sind so alt wie der Export, und die Antwort deckt nur ab, woran Sie beim Exportieren gedacht haben.

Jeder Assistent kann das. Es ist keine ERP-Integration, und ein Produkt, das es als eine beschreibt, übertreibt.

Stufe 2: eine nächtliche Kopie

Daten werden in ein Warehouse, einen Lake oder ein semantisches Modell kopiert, und der Assistent liest die Kopie.

Das ist die richtige Antwort für Trendanalysen über lange Zeiträume, und dort lebt aus guten Gründen der Großteil der Business Intelligence: Die Kopie ist für die Analyse geformt, sie ist schnell, und schwere Abfragen rühren das Produktionssystem nicht an.

Die Grenze ist die Zeit. Die Kopie ist so alt wie die letzte Ladung. „Welche Kunden liegen gerade jetzt über ihrem Kreditlimit?“ lässt sich hier nicht beantworten, und das ist die Frage, die ein Controller stellt.

Es gibt eine zweite Grenze, die man leicht übersieht. Die Kopie hat ihr eigenes Berechtigungsmodell, meist gröber als das des ERP-Systems. Wer einen Mandanten in Business Central nicht sehen kann, kann ihn im Warehouse oft sehen.

Stufe 3: ein Live-Lesevorgang über ein gemeinsames Konto

Der Assistent verbindet sich mit einem Dienstkonto und liest das Live-System.

Jetzt sind die Daten aktuell, und ein echtes Problem taucht auf. Der Assistent antwortet mit den Berechtigungen des Kontos, nicht mit denen der fragenden Person. Jeder Benutzer hat damit praktisch die Berechtigungen des Kontos.

Daraus folgen zwei Dinge. Ein Vertriebsmitarbeiter kann eine Frage stellen, deren Antwort Daten enthält, die er nicht sehen darf, und das Audit-Protokoll nennt das Dienstkonto statt der Person. Das Erste ist ein Datenschutzproblem. Das Zweite nimmt Ihnen die Antwort auf die Frage „Wer hat danach gefragt?“.

Anbieter erreichen Stufe 3 schnell, weil sie leicht zu bauen ist und sich gut vorführen lässt. Fragen Sie jeden Anbieter, dessen Vorführung beeindruckt, unter welchem Konto die Abfrage gelaufen ist.

Stufe 4: ein Live-Lesevorgang im Namen der fragenden Person

Jede Verbindung gehört einem Benutzer und enthält die eigenen delegierten Anmeldedaten dieser Person. Der Assistent liest über sie, also setzt das ERP-System die Berechtigung durch. Ein freigegebener Bericht ist die bewusste Ausnahme. In UNI4C liest er über den Zugang seines Eigentümers, und nur für die Unternehmen, die der Eigentümer benannt hat.

Das ist die Stufe, auf der die Berechtigungsfrage wirklich gelöst ist, denn die Grenze ist keine Anweisung in einem Prompt, um die sich eine geschickte Frage herumreden könnte. Es ist dieselbe Prüfung, die gilt, wenn die Person die Seite selbst öffnet.

Microsofts MCP-Server für Business Central liegt auf dieser Stufe: Microsoft gibt an, dass alle Vorgänge mit Ihrer Benutzeridentität und Ihren Berechtigungen ausgeführt werden und dass Prüfpfade zeigen, wer welche Aktion ausgeführt hat.

Stufe 5: geprüfte Zahlen und eine schriftliche Aufzeichnung

Stufe 4 beantwortet „darf diese Person das lesen?“. Sie beantwortet nicht „ist die Zahl in dem Satz echt?“.

Stufe 5 fügt drei Dinge hinzu:

Das Modell schreibt die Abfrage, nicht den Wert. Die Plattform führt die Abfrage aus und stellt die Zeilen dar. Das Modell erhält die Zeilenzahl und eine kleine Stichprobe, die die Form zeigt, und die Anweisung, nie eine Antwort aus dieser Stichprobe abzulesen.

Zahlen im Fließtext werden geprüft. Jede Zahl in der geschriebenen Antwort wird mit den Zeilen verglichen, die im selben Durchgang zurückgegeben wurden. Alles ohne Grundlage wird verborgen und als nicht verifiziert markiert.

Der Lesevorgang meldet seine eigenen Grenzen. Das Ergebnis nennt die Anzahl der Datensätze und vermerkt, ob Zeilen übrig sind, und eine Aggregation über einen abgeschnittenen Lesevorgang wird abgelehnt.

Untersuchungen zu Halluzinationen bei Finanzzahlen beschreiben die Fehlschläge, auf die diese Stufe zielt: Eine Zahl, die dem falschen Zeitraum zugeschrieben wird, eine Schwelle, die aus der Erinnerung statt aus den Daten kam, eine Summe, die plausibel und falsch ist. Sie überleben auf Stufe 4 jede Kontrolle.

Wie Sie ein Produkt in zehn Minuten einordnen

Vier Fragen, in dieser Reihenfolge gestellt.

1. Wann wurden diese Daten gelesen? Ist die Antwort ein Zeitpunkt und nicht „jetzt“, ist es Stufe 1 oder 2.
2. Welches Konto hat die Abfrage ausgeführt? Ist es ein Dienstkonto, ist es Stufe 3.
3. Wie viele Zeilen hat diese Abfrage zurückgegeben, und gab es mehr? Kann das Produkt das nicht sagen, kann es nicht verlässlich aggregieren.
4. Woher kommt genau diese Zahl? Zeigen Sie auf eine Zahl im Fließtext, nicht in einer Tabelle. Kann das Produkt sie nicht auf eine Zeile zurückführen, ist es Stufe 4.

Die meisten Produkte in dieser Kategorie stehen auf Stufe 3 und beschreiben sich in der Sprache von Stufe 5.

Welche Stufe brauchen Sie?

Nicht jeder braucht Stufe 5.

Wenn Sie Trends über Jahre analysieren und jeder, der fragt, alles sehen darf, ist Stufe 2 richtig und günstiger.

Wenn Menschen mit unterschiedlichen Berechtigungen Fragen zu aktuellen Daten stellen, brauchen Sie Stufe 4, sonst haben Sie das Berechtigungsproblem.

Wenn eine Zahl das Haus verlässt, in einer Vorstandsunterlage, einer Kreditklausel oder einem Kundenbrief, brauchen Sie Stufe 5. Ab da ist der Preis einer überzeugend vorgetragenen falschen Zahl größer als der Preis des ganzen Systems.