°nrth

Für Unternehmen

Vom ersten Befund bis zum Beleg, dass es besser wurde.

Sie betreiben einen KI-Agenten in einem Fachgebiet. Wir finden heraus, wo seine Ergebnisse nicht verwendbar sind, bauen das Material, mit dem er dazulernt, und messen danach mit demselben Maßstab noch einmal.

Gespräch vereinbaren

Der Kreislauf

Drei Stufen, ein Kreis. Sie können an jeder Stelle einsteigen.

01

Messen

Wo steht der Agent heute

02

Verbessern

Material, an dem er besser wird

03

Nachmessen

Beleg, dass er es wurde

01 · Messen

Befund und Fachbenchmark

Wir bauen Aufgabensätze, die genau dort messen, wo Ihr Agent kippt — in Ihrem Fachgebiet, mit Fällen aus dem Arbeitsalltag statt aus einer Prüfungssammlung.

  • Geschrieben von Fachexperten, die diese Arbeit täglich machen — nicht von Crowdworkern, die sie nachahmen.
  • Bewertet gegen Rubriken aus objektiven Pass/Fail-Kriterien. Jeder Punkt zeigt auf eine bestimmte Fehlerstelle, nicht auf ein Gefühl.
  • Als Katalog geliefert, den Sie gegen jeden neuen Versionsstand erneut laufen lassen können.

02 · Verbessern

Trainingsmaterial aus den eigenen Befunden

Aus der Auswertung entsteht das Material — zugeschnitten auf die Fehler, die Ihr Agent tatsächlich macht, nicht auf die, die sich leicht beschaffen lassen.

  • Zugeschnitten auf die Fehlermuster, die die Auswertung freigelegt hat.
  • Von Fachexperten Schritt für Schritt erfasst und vor der Lieferung gegengelesen.
  • In der Form, die das jeweilige Verfahren braucht: Chain-of-Thought für SFT, Bewertungsraster für Reinforcement Learning, Umgebungen für Agentenläufe.

03 · Nachmessen

Fortschritt, der sich zeigen lässt

Jeder neue Versionsstand läuft gegen denselben Katalog. Damit wird Fortschritt gezeigt statt behauptet — und man sieht, an welcher Stelle er stattgefunden hat.

  • Derselbe Katalog, dieselbe Rubrik, dieselben kritischen Kriterien. Nur der Agent ändert sich.
  • Beide Kennzahlen getrennt ausgewiesen: der Rubrik-Score und die Verwertbarkeit.
  • Sichtbar wird auch, wo sich nichts bewegt hat. Das ist die nützlichere Hälfte.

Der Einstieg ist ein einzelner Fall aus Ihrem Fachgebiet.

Wir lassen Ihren Agenten daran arbeiten und legen die Auswertung daneben — Kriterium für Kriterium. Danach ist entschieden, ob sich ein Katalog lohnt.

Agenten prüfen lassen