KI-Agenten nutzen zu viele Werkzeuge: HDPO löst das Problem
KI-Agenten rufen ständig externe Werkzeuge auf. Websuchen, Code-Ausführungen, Bildanalysen. Oft ist das jedoch gar nicht nötig. Forscher von Alibaba haben mit HDPO einen Lösungsansatz entwickelt, der die Effizienz von KI-Agenten drastisch steigert. Zudem verbessert er die Genauigkeit, wie auch die Studie dokumentiert.
Das Metakognitions-Defizit heutiger Agenten
Das Kernproblem lässt sich als metakognitives Defizit beschreiben. Allerdings haben große Sprachmodelle erhebliche Schwierigkeiten zu entscheiden, wann sie ihr internes Wissen nutzen sollten und wann ein externer Werkzeugaufruf sinnvoll ist. Statt jedoch abzuwägen, greifen sie blind zu Tools und APIs. Selbst wenn die Nutzerfrage bereits alle Informationen enthält, die zur Beantwortung nötig sind.
Dieses auslösefreudige Verhalten erzeugt nämlich erhebliche operative Probleme. Da Modelle darauf trainiert werden, Aufgaben um jeden Preis zu lösen, sind sie weitgehend gleichgültig gegenüber Latenzzeiten. Jeder einzelne Werkzeugaufruf führt jedoch zu einer seriellen Verarbeitung, die selbst technisch fähige KI in ein träges System verwandelt. Gleichzeitig verbessert die Verschwendung von Rechenressourcen die Reasoning-Fähigkeiten nicht. Im Gegenteil: Redundante Werkzeuginteraktionen fügen dem Kontext Rauschen hinzu.
HDPO: Ein neuer Ansatz
HDPO steht für Hierarchical Decision Process Optimization. Der Ansatz trainiert Agenten darauf, zwischen internem Wissen und externen Werkzeugaufrufen zu unterscheiden. Statt jedes mögliche Werkzeug aufzurufen, lernt der Agent zuerst, ob ein Werkzeugaufruf überhaupt notwendig ist. Nur wenn die interne Wissensbasis nicht ausreicht, wird ein externes Werkzeug aktiviert.
Diese Unterscheidung reduziert die Anzahl unnötiger API-Aufrufe erheblich. Die Forscher berichten von einer Verringerung der Werkzeugnutzung um bis zu 60 Prozent bei gleichzeitiger Verbesserung der Aufgabengenauigkeit. Daher ist HDPO ein vielversprechender Ansatz für effizientere KI-Agenten. Auch unser Bericht zu KI-Agenten und Werkzeugnutzung zeigt diese Problematik.