La plateforme d'évaluation open source de référence pour LLM et modèles multimodaux
Visiter le site officielOpenCompass est une plateforme d'évaluation open source universelle pour grands modèles de langage (LLM) et modèles multimodaux, développée par le Shanghai AI Laboratory. Structurée de manière modulaire, elle prend en charge plus de 100 jeux de données de référence (MMLU, C-Eval) et de nombreux modèles tels que LLaMA, GPT-4, Qwen et InternLM. L'outil facilite l'évaluation distribuée, le partitionnement de tâches complexes et l'évaluation subjective automatisée via l'approche LLM-as-a-Judge.