Zeno KI-Agent – SMC-Benchmark-Ergebnisse
Öffentliche Benchmark-Methodik, die den Zeno KI-Agenten mit den führenden universellen Large Language Models anhand von 50 sorgfältig konstruierten Trading-Szenarien zu Smart Money Concepts vergleicht. Methodik, Chartdaten und Prompts sind reproduzierbar. Vierteljährlich aktualisiert.
Der Zeno KI-Agent erreichte im SMC-Benchmark 45/50 (90 %), gegenüber Claude 4.7 mit 32/50 (64 %), ChatGPT-5 mit 27/50 (54 %) und Gemini 3 mit 27/50 (54 %). Der Abstand spiegelt die Spezialisierung wider – Zeno ist gezielt auf SMC-Mustererkennung trainiert, allgemeine LLMs nicht. Vollständige Methodik und vierteljährliche Updates unten.
Ergebnisse nach Kategorie
Methodik
So funktioniert der Benchmark
Jeder Test zeigt einen echten Chart-Screenshot eines großen Assets (BTCUSDT, ETHUSDT, XAUUSD, EURUSD, NAS100) zu einem bestimmten Zeitpunkt, zusammen mit einer Frage, die eine Fähigkeit aus den Smart Money Concepts prüft. Das getestete Modell muss in einem strukturierten Format antworten, das wir deterministisch bewerten können (Multiple Choice oder Koordinaten für Grenzen).
Jedes Szenario wird gegen eine Referenzlösung bewertet, die drei unabhängige SMC-Trader festgelegt haben (Abonnenten der Zeno-Stufe, die sich freiwillig als Bewerter gemeldet haben) – jeder hat den Chart markiert, bevor er die Antwort eines Modells gesehen hat. Ein Szenario gilt nur dann als „richtig“, wenn die Antwort des Modells mit der gemeinsamen Referenzlösung übereinstimmt.
Fünf Testkategorien
- Erkennung von Order Blocks (12 Szenarien): die genaue Kerze und die Preisgrenzen eines tradebaren Order Blocks nach einem impulsiven Strukturbruch bestimmen. Prüft strenge Bildungsregeln gegenüber großzügigen Zonen.
- FVG-Erkennung & Mitigationsstatus (10 Szenarien): Fair Value Gaps erkennen, die noch NICHT mitigiert wurden. Prüft die Erkennung des Drei-Kerzen-Musters und das Nachverfolgen des Preisverlaufs.
- Erkennung von Liquidity Sweeps (8 Szenarien): bestimmen, ob ein Docht, der ein früheres Swing-Hoch/-Tief überschritten hat, als Stop-Hunt-Sweep mit Ablehnung gilt. Prüft, ob institutionelle Absicht aus der Kerzenanatomie gelesen wird.
- BOS/CHoCH-Klassifizierung (10 Szenarien): bestimmen, ob ein bestimmter Strukturbruch ein Break of Structure (Fortsetzung) oder ein Change of Character (Umkehr) ist. Prüft den Kontext des vorherrschenden Trends.
- Multi-Timeframe-Konfluenz (10 Szenarien): anhand einer Chart-Ansicht mit drei gleichzeitigen Timeframes bestimmen, welche Einstiegszonen über alle drei übereinstimmen. Prüft die Synthese über mehrere Kontextfenster.
Warum generische LLMs schlechter abschneiden
Universelle LLMs werden auf breiten Webdaten trainiert, in denen SMC-Inhalte nur einen kleinen Teil des Trading-Materials ausmachen – die meisten Texte behandeln klassische Indikatoren (RSI, MACD, gleitende Durchschnitte). Sie lernen SMC-Konzepte nur ungefähr, mit deutlichen Abweichungen zwischen den Definitionen. Außerdem tun sie sich schwer mit dem präzisen räumlichen Denken, das nötig ist, um die Grenzen einer bestimmten Kerze auf einem Chart-Screenshot zu bestimmen.
Zeno ist ein Spezialist. Die Mustererkennung läuft über SMC-Logik, die aus Pine Script abgeleitet ist (deterministisch), während die Erklärungen in natürlicher Sprache von einem LLM stammen, das auf einem kuratierten SMC-Korpus feinabgestimmt wurde. Durch diese Architektur kommt die Referenz aus Regeln, nicht aus dem auswendig gelernten SMC-Wissen des Modells.
Reproducibility
- Das Testset mit 50 Szenarien (Charts + Referenz-Labels, CC BY-NC 4.0) ist auf Anfrage erhältlich – kontaktiere uns für Zugang zum vollständigen Datensatz
- Die für jedes Modell verwendeten Prompts sind pro Szenario dokumentiert, inklusive exakter Temperature, System-Prompt und Bildvorverarbeitung
- Jedes Modell läuft pro Szenario 3-mal; gewertet wird die übereinstimmende Antwort
- Getestete Modellversionen: Zeno (Release Q2 2026), Claude 4.7 (Standard), GPT-5 (Standard), Gemini 3 (Standard)
- Jeder kann den Benchmark mit eigenem API-Zugang innerhalb weniger Stunden reproduzieren
Häufig gestellte Fragen
Warum sind die Testgrößen ungleich (8, 10, 10, 10, 12)?
Die Kategorien sind unterschiedlich komplex. Die Erkennung von Order Blocks hat die meisten Szenarien (12), weil es mehr Unterfälle gibt (bullische vs. bärische OBs, mitigiert vs. nicht mitigiert, Breaker Blocks). Liquidity Sweeps haben weniger (8), weil das Muster einheitlicher ist. Die Anzahl pro Kategorie spiegelt die natürliche Verteilung der SMC-Entscheidungen wider, die ein Trader tatsächlich trifft.
Kann ein generisches LLM bei SMC jemals mit Zeno mithalten?
Mit ausreichend Prompt-Engineering und Few-Shot-Beispielen können generische LLMs bei den einfacheren Kategorien einen Teil des Abstands aufholen. Multi-Timeframe-Konfluenz und die BOS/CHoCH-Klassifizierung bleiben für sie besonders schwierig, weil sie Kontext über mehrere Chartbilder hinweg zusammenführen müssen. Wenn Frontier-Modelle beim Denken über mehrere Bilder besser werden, wird der Abstand schrumpfen – deshalb aktualisieren wir vierteljährlich.
Ist dieser Benchmark zugunsten von Zeno verzerrt?
Die Testszenarien stammen aus echten Charts und werden von unabhängigen SMC-Tradern bewertet, bevor die Antwort eines Modells zu sehen ist. Die Bewerter wissen nicht, welches Modell welche Antwort gegeben hat. Die Methodik ist veröffentlicht – jeder kann alternative Testsets erstellen und eigene Ergebnisse berichten. Das Testset enthält Szenarien, in denen auch Zeno scheitert (5 von 50), was wir öffentlich dokumentieren.
Wie schneidet das im Vergleich zur Quant-Funktion von LuxAlgo ab?
Quant von LuxAlgo ist ein marketinggetriebenes KI-Tool ohne veröffentlichte Benchmarks, ohne öffentliches Testset und ohne dokumentierte Methodik. Wir veröffentlichen unsere gerade deshalb, weil das der Unterschied ist – überprüfbare KI-Fähigkeit statt beworbener KI-Fähigkeit. Wir laden LuxAlgo und jeden anderen Mitbewerber ein, denselben Benchmark mit ihrem Tool durchzuführen und die Ergebnisse zu veröffentlichen.
Teste Zeno auf deinen eigenen Charts
Benchmarks sind nützlich, aber der einzige Test, der zählt, ist, ob Zeno dir hilft, deine eigenen Setups besser zu traden. Zeno ist in der Zeno-Stufe ($79/Monat) enthalten. Jederzeit kündbar.
Zeno-Preise ansehen →