- Génération IA
- Posts
- 10 infos clés du rapport Stanford sur l'IA que vous n'avez peut-être pas vu passer
10 infos clés du rapport Stanford sur l'IA que vous n'avez peut-être pas vu passer
Détection des hallucinations, productivité, investissements, biais, usages, sécurité : découvrez les chiffres 2024.
Le rapport HAI AI 2024 de l'Université de Stanford est LE rapport à ne pas manquer pour faire le point sur l'état et l'évolution du monde de l'IA, avec un nombre considérables de données scientifiques.
J'ai lu le rapport, en essayant d'identifier les infos moins médiatisées mais qui, pour moi, sont les plus significatives des préoccupations que nous devrions avoir concernant ce secteur en pleine ébullition.
1️⃣ Les chatbots d'IA comme ChatGPT hallucinent moins. Un nouveau benchmark (HaluEval) révèle que ChatGPT invente 19,5% de ses réponses (contre 4 fois sur 10 selon une autre étude de 2022). ChatGPT reste le modèle le plus fiable dans la détection des hallucinatons, juste devant Claude.
2️⃣ 55% des entreprises intègrent l'IA (contre 50% en 2022, et 20% en 2017).
3️⃣ 42 % des organisations interrogées rapportent des réductions de coûts suite à la mise en œuvre de l'IA (y compris l'IA générative), et 59 % signalent des augmentations de revenus. C'est 10 points de plus par rapport à 2022.
4️⃣ En 2023, plusieurs études suggérent que l'IA (dont l'IA générative) permet aux travailleurs d'effectuer des tâches plus rapidement et d'améliorer la qualité de leur production. Elles ont également démontré le potentiel de l'IA à combler le fossé entre les travailleurs peu et très qualifiés. Cependant, d'autres études mettent en garde contre le fait que l'utilisation de l'IA sans une supervision adéquate peut entraîner une diminution des performances.
5️⃣ Les entreprises se sentent majoritairement concernées par les risques liés à l'IA (plus de 50%), essentiellement sur les questions de confidentialité. Seules 18% des entreprises européennes ont déjà mis en œuvre plus de la moitié des mesures demandées par les chercheurs.
Les mesures préconisées par les chercheurs.
6️⃣ ChatGPT a un biais politique en faveur des démocrates (USA) et du parti travailliste (UK). Le biais des modèles de langage reflètent majoritairement les points de vue occidentaux. Ces modèles privilégient également systématiquement (98%) une "bonne démocratie" au dessus d'une "bonne économie" contre 16% pour la population russe et 28% en Indonésie. Et 58;7% pour les Etats-Unis. Les chiffres viennent de cette étude.
7️⃣ Les investissements dans l'IA générative ont été multipliés par 8 en 2023, mais les investissement globaux dans l'IA ont chuté.
8️⃣ Les modèles de langage coûtent de plus en plus cher à entraîner. Les coûts por l'environnement, cependant, manquent encore de mesures fiables en raison du manque de transparence des entreprises leaders.
9️⃣ La diversité s'améliore : 30,5% des femmes en 2022 aux examens de science informatique contre 16,8% en 2007.
🔟 Les principaux usages de l'IA générative sont, dans l'ordre : 1) créer un premier brouillon d'un document 2) personnalisation du marketing 3) résumé de documents 4) création d'images ou de vidéos 5) Identification des tendances dans les besoins des consommateurs 6) création de chatbots.