AutoArena est un outil innovant open-source qui rationalise le processus d'évaluation de divers systèmes d'IA générative. En utilisant de grands modèles linguistiques comme juges, AutoArena automatise les évaluations directes, permettant aux utilisateurs de classer différentes méthodologies GenAI de manière efficace. Il offre des fonctionnalités pour affiner des modèles de juges personnalisés, générer des classements avec des scores Elo et prendre en charge diverses configurations de juges. En permettant la collaboration dans le cloud, AutoArena améliore le travail d'équipe sur les évaluations et fournit une plateforme robuste pour les configurations d'intégration continue dans le paysage de l'IA.