L' Organisation de coopération et de développement économiques (OCDE) a publié un rapport analysant les capacités de l'intelligence artificielle (IA) dans les tests de littératie et de numératie pour adultes. L'étude fait partie du projet « IA et l'avenir des compétences » . Le rapport montre comment les capacités de l'IA ont évolué depuis un test pilote en 2016 jusqu'à la mi-2022, peu avant le lancement de ChatGPT . L'évaluation des capacités de l'IA dans ces compétences est révélatrice de l'impact potentiel de l'IA sur le travail et la vie, car ce sont des compétences pertinentes dans la plupart des contextes sociaux et des situations de travail.
Les experts qui ont participé à l'étude se sont basés sur les questions du "Programme pour l'évaluation internationale des compétences des adultes" (PIAAC, pour son acronyme en anglais). Comme détaillé ci-dessous, dans les principaux résultats, l'IA a été en mesure de répondre à environ 80 % des questions d'alphabétisation et de résoudre environ les deux tiers du test de numératie . Sin embargo, los resultados del informe sugieren que es poco probable que la IA reemplace a los humanos en habilidades que requieren conocimiento general y se expresan en lenguaje e imágenes, ya que la extracción de modelos formales de tareas en estas áreas ha recibido menos atención en l'investigation.
Quelques résultats clés de l'étude :
1. L'IA a la capacité de répondre à environ 80 % des questions d'alphabétisation du PEICA , y compris la plupart des questions faciles et de nombreuses questions plus difficiles.
2. L'IA peut résoudre environ les deux tiers du test d'arithmétique , mais il existe un désaccord sur la manière dont ses performances ont été évaluées. Certains envisageaient des solutions d'IA étroites pour des questions arithmétiques distinctes, tandis que d'autres envisageaient des systèmes généraux capables de raisonner mathématiquement et de traiter toutes sortes de questions arithmétiques de type PIAAC. Cela a conduit à des évaluations divergentes, les derniers experts donnant des notes inférieures aux premiers.
3. Depuis 2016, il y a eu une amélioration considérable des capacités de littératie en IA, avec une augmentation de 25 % du taux de réussite attendu au test de littératie . Cela est dû aux avancées technologiques dans le traitement du langage naturel, notamment grâce à des modèles pré-formés comme GPT.
3. Il est peu probable que les capacités de calcul de l'IA aient beaucoup changé entre 2016 et 2021. L'automatisation des mathématiques formelles est facile, mais l'extraction de modèles formels de tâches qui nécessitent des connaissances générales et sont exprimées en langage et en images a reçu moins d'attention dans la recherche.
4. Les experts estiment que d'ici 2026, l'IA sera en mesure de résoudre tous les tests de littératie et de calcul , grâce aux avancées technologiques et aux énormes investissements et recherches en PNL.
5. Les modèles de langage long ont été affinés et appliqués à des problèmes mathématiques, produisant d'importants tests comparatifs et des systèmes qui fonctionnent bien sur ces tests. Les experts s'attendent à ce que l'IA progresse considérablement en arithmétique dans les années à venir.
6. Selon les experts, l'IA a le potentiel de surpasser de larges pourcentages de la population en littératie , avec des performances similaires à celles des adultes compétents au niveau 3 du PEICA. Dans les pays de l'OCDE, 90 % des adultes sont au niveau 3 ou inférieur en littératie.
7. Pour l'arithmétique, la performance de l'IA évaluée par des experts est similaire à celle des adultes au niveau 2 sur les questions faciles et intermédiaires et des adultes au niveau 3 sur les questions plus difficiles. Dans les pays de l'OCDE, 57 % des adultes sont au niveau 2 ou inférieur en numératie, et 88 % sont au niveau 3 ou inférieur.
considérations finales
Le rapport de l'OCDE note que les progrès de l'intelligence artificielle en littératie et en numératie pourraient avoir des implications importantes pour l'emploi et l'éducation . La plupart des travailleurs utilisent ces compétences quotidiennement au travail, mais elles ne se sont pas améliorées dans la plupart des pays au cours des dernières décennies.
L'IA développe rapidement ces compétences et pourrait affecter le travail des travailleurs ayant des compétences comparables ou inférieures à celles des ordinateurs. Les pays ne peuvent pas fournir les compétences nécessaires pour surpasser l'IA, de sorte que l'éducation pourrait se concentrer sur l'enseignement aux étudiants pour utiliser efficacement les systèmes d'intelligence artificielle.
LIRE PLUS