#benchmark

4 articles tagués « benchmark »

LLM8 juil.

Google actualise Android Bench avec huit nouveaux modèles d'IA, mais Gemini recule au classement

Comprendre l'évolution des outils de benchmarking pour les développeurs d'IA sur Android.

2 min1 source

asr24 juin

FFASR Leaderboard : nouveau benchmark pour l'ASR en conditions réelles

La communauté peut désormais évaluer les modèles de reconnaissance automatique de la parole (ASR) dans des scénarios concrets grâce à un nouveau benchmark.

2 min1 source

Outils18 juin

Benchmarking des modèles IA open source : évaluer leur capacité à utiliser des outils

Hugging Face propose une méthode pour évaluer si les modèles IA open source sont suffisamment capables d'interagir avec des outils externes, un critère clé pour leur déploiement pratique.

1 min1 source

Recherche17 juin

OpenAI lance LifeSciBench, un benchmark pour évaluer l'IA en sciences de la vie

OpenAI présente LifeSciBench, un nouveau benchmark conçu pour tester les capacités des modèles d'IA dans des tâches complexes liées à la recherche en sciences de la vie, avec une validation par des experts du domaine.

1 min1 source

→

Autres tags

openai 93 anthropic 78 google 74 robotique 45 ia 42 agents_ia 34 régulation 32 meta 30 nvidia 30 claude 26 hugging_face 26 mistral 26