IntentResolutionEvaluator Klasse
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Eine IEvaluator Bewertung der Effektivität eines KI-Systems bei der Identifizierung und Auflösung von Benutzerabsichten.
public ref class IntentResolutionEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator[System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")]
public sealed class IntentResolutionEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluatorpublic sealed class IntentResolutionEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator[<System.Diagnostics.CodeAnalysis.Experimental("AIEVAL001")>]
type IntentResolutionEvaluator = class
interface IEvaluatortype IntentResolutionEvaluator = class
interface IEvaluatorPublic NotInheritable Class IntentResolutionEvaluator
Implements IEvaluator- Vererbung
-
IntentResolutionEvaluator
- Attribute
- Implementiert
Hinweise
IntentResolutionEvaluator bewertet die Effektivität eines KI-Systems bei der Identifizierung und Auflösung von Benutzerabsichten basierend auf dem bereitgestellten Unterhaltungsverlauf und den über ToolDefinitionsdiese bereitgestellten Tooldefinitionen.
Beachten Sie, dass derzeit nur die Auswertung von Aufrufen von Tools unterstützt wird, IntentResolutionEvaluator die als AIFunctionDeclarations definiert sind. Alle anderen AITool Definitionen, die über ToolDefinitions sie bereitgestellt werden, werden ignoriert.
IntentResolutionEvaluator gibt einen NumericMetric Wert zurück, der eine Bewertung für "Intent Resolution" enthält. Die Punktzahl ist eine Zahl zwischen 1 und 5, wobei 1 eine schlechte Bewertung angibt, und 5, die eine hervorragende Bewertung anzeigt.
Hinweis:IntentResolutionEvaluator ist ein KI-basierter Evaluator, der ein KI-Modell verwendet, um seine Auswertung durchzuführen. Während die Aufforderung, dass dieser Evaluierungsauswerter verwendet, modellagnostisch ist, kann die Leistung dieser Eingabeaufforderung (und der resultierenden Auswertung) je nach verwendetem Modell variieren und kann besonders schlecht sein, wenn ein kleineres/lokales Modell verwendet wird.
Die Eingabeaufforderung, die verwendet wird, IntentResolutionEvaluator wurde auf die folgenden Modelle getestet (und darauf abgestimmt), dass sie gut funktionieren. Daher ist die Verwendung dieses Evaluators mit einem Modell aus der folgenden Liste wahrscheinlich die besten Ergebnisse. (Das zu verwendende Modell kann über ChatClient.)
GPT-4o
Konstruktoren
| Name | Beschreibung |
|---|---|
| IntentResolutionEvaluator() |
Eine IEvaluator Bewertung der Effektivität eines KI-Systems bei der Identifizierung und Auflösung von Benutzerabsichten. |
Eigenschaften
| Name | Beschreibung |
|---|---|
| EvaluationMetricNames |
Ruft die Names der EvaluationMetricvon diesem IEvaluatorerzeugten s ab. |
| IntentResolutionMetricName |
Ruft die Name der NumericMetric zurückgegeben von IntentResolutionEvaluator. |
Methoden
| Name | Beschreibung |
|---|---|
| EvaluateAsync(IEnumerable<ChatMessage>, ChatResponse, ChatConfiguration, IEnumerable<EvaluationContext>, CancellationToken) |
Wertet den angegebenen |
