Nous présentons EVAL Engine (Evaluation Validation Architecture), un framework décentralisé pour l'évaluation des agents IA avec un accent sur les agents crypto-natifs grâce à des évaluations en temps réel vérifiables et des capacités d'apprentissage continu.

Notre système utilise l'architecture de blockchain relationnelle sans frais de gas de Chromia pour permettre une évaluation transparente, immuable et rentable des performances des agents IA. Le système intègre plusieurs LLM-as-a-judge[1] et des métriques d'engagement social pour un apprentissage par renforcement continu via une boucle de rétroaction et un système de récompense.

Nous démontrons qu'EVAL Engine peut réaliser des évaluations efficaces et sécurisées tout en s'adaptant aux normes de performance évolutives grâce à des boucles de rétroaction axées sur l'engagement.

Nous présentons également une feuille de route complète pour le développement d'EVAL Engine, y compris le développement d'API, la préparation des données, le développement de modèles et le déploiement de modèles.