Apresentamos o EVAL Engine (Evaluation Validation Architecture), uma estrutura descentralizada para avaliação de agentes de IA com foco em agentes nativos de cripto por meio de avaliações em tempo real verificáveis e capacidades de aprendizado contínuo.

Nosso sistema utiliza a arquitetura de blockchain relacional sem taxas de gas da Chromia para permitir a avaliação transparente, imutável e econômica do desempenho de agentes de IA. O sistema incorpora múltiplos LLM-as-a-judge[1] e métricas de engajamento social para aprendizado por reforço contínuo por meio de loop de feedback e sistema de recompensas.

Demonstramos que o EVAL Engine pode alcançar avaliações eficientes e seguras, ao mesmo tempo em que se adapta aos padrões de desempenho em evolução por meio de loops de feedback orientados pelo engajamento.

Também apresentamos um roteiro abrangente para o desenvolvimento do EVAL Engine, incluindo desenvolvimento de API, preparação de dados, desenvolvimento de modelos e implantação de modelos.