Fünf Stufen des KI-Zugriffs auf ein ERP

„Die KI liest Ihr ERP“ sagt jeder Anbieter in dieser Kategorie, und es beschreibt fünf verschiedene Dinge. Der Abstand zwischen dem ersten und dem fünften ist der Unterschied zwischen einer Vorführung und einem System, das ein Finanzteam benutzen kann.

Nutzen Sie diese Leiter, um jedes Produkt einzuordnen, auch dieses.

Die fünf Stufen

Jede Stufe löst ein Problem, das die Stufe darunter hat. Jede Stufe kostet auch mehr im Bau, und darum hören Produkte auf verschiedenen Sprossen auf.

Stufe 1: Beleg hochladen

Sie exportieren einen Bericht, laden die Datei hoch und stellen Fragen dazu.

Das funktioniert, und es ist für eine einmalige Analyse nützlicher, als es klingt. Es hat zwei Grenzen. Die Daten sind so alt wie der Export, und die Antwort deckt nur ab, woran Sie beim Exportieren gedacht haben.

Jeder Assistent kann das. Es ist keine ERP-Integration, und ein Produkt, das es als eine beschreibt, übertreibt.

Stufe 2: eine nächtliche Kopie

Daten werden in ein Warehouse, einen Lake oder ein semantisches Modell kopiert, und der Assistent liest die Kopie.

Das ist die richtige Antwort für Trendanalysen über lange Zeiträume, und dort lebt aus guten Gründen der Großteil der Business Intelligence: die Kopie ist für die Analyse geformt, sie ist schnell, und schwere Abfragen rühren das Produktionssystem nicht an.

Die Grenze ist die Zeit. Die Kopie ist so alt wie die letzte Ladung. „Welche Kunden liegen gerade jetzt über ihrem Kreditlimit?“ lässt sich hier nicht beantworten, und das ist die Frage, die ein Controller stellt.

Es gibt eine zweite Grenze, die man leicht übersieht. Die Kopie hat ihr eigenes Berechtigungsmodell, meist gröber als das des ERP-Systems. Wer einen Mandanten in Business Central nicht sehen kann, kann ihn im Warehouse oft sehen.

Stufe 3: ein Live-Lesevorgang über ein gemeinsames Konto

Der Assistent verbindet sich mit einem Dienstkonto und liest das laufende System.

Jetzt sind die Daten aktuell, und ein echtes Problem taucht auf. Der Assistent antwortet mit den Berechtigungen des Kontos, nicht mit denen der fragenden Person. Jeder Benutzer hält damit praktisch die Berechtigungen des Kontos.

Daraus folgen zwei Dinge. Ein Vertriebsmitarbeiter kann eine Frage stellen, deren Antwort Daten enthält, die er nicht sehen darf, und die Prüfaufzeichnung nennt das Dienstkonto statt der Person. Das Erste ist ein Datenschutzproblem. Das Zweite nimmt Ihnen die Antwort auf die Frage „wer hat danach gefragt?“.

Anbieter erreichen Stufe 3 schnell, weil sie leicht zu bauen ist und sich gut vorführen lässt. Fragen Sie jeden Anbieter, dessen Vorführung beeindruckt, als welches Konto die Abfrage gelaufen ist.

Stufe 4: ein Live-Lesevorgang als die fragende Person

Jede Verbindung gehört einem Benutzer und hält die eigenen delegierten Anmeldedaten dieser Person. Der Assistent liest durch sie, also setzt das ERP-System die Berechtigung durch.

Das ist die Stufe, auf der die Berechtigungsfrage wirklich gelöst ist, denn die Grenze ist keine Anweisung in einem Prompt, um die sich eine geschickte Frage herumreden könnte. Es ist dieselbe Prüfung, die gilt, wenn die Person die Seite selbst öffnet.

Microsofts MCP-Server für Business Central liegt auf dieser Stufe: Microsoft gibt an, dass alle Vorgänge mit Ihrer Benutzeridentität und Ihren Berechtigungen ausgeführt werden und dass Prüfpfade zeigen, wer welche Handlung ausgeführt hat.

Stufe 5: geprüfte Zahlen und eine schriftliche Aufzeichnung

Stufe 4 beantwortet „darf diese Person das lesen?“. Sie beantwortet nicht „ist die Zahl in dem Satz echt?“.

Stufe 5 fügt drei Dinge hinzu:

Das Modell schreibt die Abfrage, nicht den Wert. Die Plattform führt die Abfrage aus, stellt die Zeilen dar und sagt dem Modell nur, dass ein Ergebnis erschienen ist.

Zahlen in der Prosa werden geprüft. Jede Zahl in der geschriebenen Antwort wird gegen die Zeilen verglichen, die im selben Zug zurückgegeben wurden. Alles ohne Grundlage wird entfernt.

Der Lesevorgang meldet seine eigenen Grenzen. Das Ergebnis trägt die Anzahl der Datensätze und ob Zeilen übrig sind, und eine Aggregation über einen abgeschnittenen Lesevorgang wird abgelehnt.

Untersuchungen zu Halluzinationen bei Finanzzahlen beschreiben die Fehlschläge, auf die diese Stufe zielt: eine Zahl, die dem falschen Zeitraum zugeschrieben wird, eine Schwelle, die aus der Erinnerung statt aus den Daten kam, eine Summe, die plausibel und falsch ist. Sie überleben auf Stufe 4 jede Kontrolle.

Wie Sie ein Produkt in zehn Minuten einordnen

Vier Fragen, in dieser Reihenfolge gestellt.

1. Wann wurden diese Daten gelesen? Ist die Antwort ein Zeitpunkt und nicht „jetzt“, ist es Stufe 1 oder 2.
2. Welches Konto hat die Abfrage ausgeführt? Ist es ein Dienstkonto, ist es Stufe 3.
3. Wie viele Zeilen hat diese Abfrage zurückgegeben, und gab es mehr? Kann das Produkt das nicht sagen, kann es nicht verlässlich aggregieren.
4. Woher kommt genau diese Zahl? Zeigen Sie auf eine Zahl in der Prosa, nicht in einer Tabelle. Kann das Produkt sie nicht auf eine Zeile zurückführen, ist es Stufe 4.

Die meisten Produkte in dieser Kategorie stehen auf Stufe 3 und beschreiben sich in der Sprache von Stufe 5.

Welche Stufe brauchen Sie?

Nicht jeder braucht Stufe 5.

Wenn Sie Trends über Jahre analysieren und jeder, der fragt, alles sehen darf, ist Stufe 2 richtig und günstiger.

Wenn Menschen mit unterschiedlichen Berechtigungen Fragen zu aktuellen Daten stellen, brauchen Sie Stufe 4, sonst ist das Berechtigungsproblem Ihres.

Wenn eine Zahl das Haus verlässt, in einer Vorstandsunterlage, einer Kreditklausel oder einem Kundenbrief, brauchen Sie Stufe 5. Ab da ist der Preis einer selbstsicheren falschen Zahl größer als der Preis des ganzen Systems.