L’équipe de Google comprend que les outils d’intelligence artificielle peuvent rendre plus rapide et plus facile la création d’applications Android de haute qualité et a décidé d’aider les développeurs à tirer le meilleur parti de ce potentiel.
Au cours des dernières heures, à travers un post sur le blog officiel, le géant de Mountain View a annoncé la sortie de la première version d’Android Bench, une solution conçue pour mesurer la manière dont les LLM réalisent leurs activités de développement Android, afin d’avoir un point de référence notamment en matière d’applications de haute qualité.
Google présente Android Bench
L’objectif de l’équipe Google est de fournir aux modélisateurs une référence pour évaluer les capacités du LLM pour le développement Android, afin d’établir une base claire et fiable pour un développement de haute qualité.
Google affirme qu’aider les créateurs de modèles à identifier les lacunes et à accélérer le déploiement des améliorations devrait permettre aux développeurs de disposer d’un plus large éventail de modèles utiles parmi lesquels choisir pour l’assistance à l’IA, ce qui devrait conduire à des applications de meilleure qualité dans l’écosystème Android.
Le géant de Mountain View a expliqué que Android Bench évalue les modèles en leur demandant de résoudre des problèmes réels rencontrés dans des projets publics populaires, pour savoir si leIA c’est vraiment capable de corriger un bug ou d’ajouter une fonctionnalité d’une manière techniquement réalisable pour être réellement mis en œuvre.
Lors des premiers tests réalisés par le géant de Mountain View, les modèles ont réussi à réaliser entre 16% et 72% des tâches, démontrant que certains LLM disposent déjà d’une solide base de connaissances sur Android tandis que d’autres ont une marge d’amélioration considérable et cela devrait encourager les créateurs respectifs à travailler sur leur optimisation.
Pour plus d’informations, veuillez vous référer à l’article publié par Google tandis que vous pouvez trouver Android Bench en suivant ce lien.
