Genie One-Genauigkeit: Warum kuratierte Agenten einen governten Kontext benötigen
Von KI aus dem englischen Original übersetzt. Auf Englisch ansehen
Databricks Genie One erreicht eine Genauigkeit von 93–95 %, wenn kuratierte Genie Agenten mit governter Unity Catalog-Kontext wie Metric Views und Pages kombiniert werden. Damit übertrifft es Setups mit reinen Tabellen deutlich. Während Agenten für unstrukturierte Daten wie PDFs erforderlich sind, eliminiert die zentrale Modellierung des governten Kontexts inoffizielles Wissen und sorgt dafür, dass sich Metrik-Updates ohne Anpassung der Agenten auf alle Antworten auswirken.
* Databricks Genie One liefert die höchste Genauigkeit, wenn es kuratierte Genie Agenten zusammen mit modelliertem Wissen und dem in Unity Catalog definierten governten Geschäftskontext verwendet. Bei 125 Fragen zu einem fiktiven Versicherer erreichte Genie One 93–95 % mit kuratierten Genie Agenten und governtem Geschäftskontext (Metric Views, Domains/Subdomains und Pages), 83 % mit Agenten oder der governten Schicht allein und 64 % mit reinen Tabellen. * Agenten und die governte Schicht lösen unterschiedliche Probleme. Metric Views, Domains, Subdomains und Pages helfen Genie One dabei, Definitionsfragen zu beantworten, die sonst auf Stammtischwissen basieren würden, während Agenten für Fragen benötigt werden, die Antworten aus unstrukturierten Daten wie PDFs erfordern. * Definieren Sie jede Geschäftskennzahl einmal in einer zertifizierten Metric View und nutzen Sie eine Page, um zu erklären, wann sie gilt. In einem separaten Änderungstest wurden durch die Aktualisierung einer Metric View und der dazugehörigen Page alle 12 zugehörigen Genie One-Antworten auf die neue Definition umgestellt, ohne dass Agenten bearbeitet werden mussten.