Apresentamos o EVAL Engine (Evaluation Validation Architecture), uma estrutura descentralizada para avaliar agentes de IA com foco em agentes nativos de cripto por meio de avaliações verificáveis em tempo real e capacidades de aprendizado contínuo.

Nosso sistema utiliza a arquitetura de blockchain relacional sem gas da Chromias para permitir uma avaliação transparente, imutável e econômica do desempenho dos agentes de IA. O sistema incorpora múltiplos LLM-as-a-judge[1] e métricas de engajamento social para aprendizado por reforço contínuo por meio de loop de feedback e sistema de recompensas.

Demonstramos que o EVAL Engine pode alcançar avaliações eficientes e seguras enquanto se adapta a padrões de desempenho em evolução por meio de loops de feedback orientados pelo engajamento.

Também apresentamos uma roadmap abrangente para o desenvolvimento do EVAL Engine, incluindo desenvolvimento de API, preparação de dados, desenvolvimento de modelo e implantação do modelo.