Au milieu d’un énorme battage médiatique autour de l’IA générative, une nouvelle étude de chercheurs du MIT met en lumière l’impact de la technologie sur le travail, constatant qu’elle augmentait la productivité des travailleurs affectés à des tâches telles que la rédaction de lettres de motivation, d’e-mails délicats et d’analyses coûts-avantages.
Les tâches de l’étude n’étaient pas tout à fait des répliques d’un travail réel : elles ne nécessitaient pas d’exactitude factuelle précise ni de contexte sur des éléments tels que les objectifs d’une entreprise ou les préférences d’un client. Pourtant, un certain nombre de participants à l’étude ont déclaré que les devoirs ressemblaient à des choses qu’ils avaient écrites dans leur travail réel et que les avantages étaient substantiels. L’accès au chatbot d’assistance ChatGPT a réduit de 40 % le temps nécessaire aux travailleurs pour effectuer les tâches, et la qualité des résultats, telle que mesurée par des évaluateurs indépendants, a augmenté de 18 %.
Les chercheurs espèrent que l’étude, qui paraît aujourd’hui sous forme d’accès libre dans la revue Science, aide les gens à comprendre l’impact que les outils d’IA comme ChatGPT peuvent avoir sur la main-d’œuvre.
« Ce que nous pouvons dire avec certitude, c’est que l’IA générative aura un effet important sur le travail des cols blancs », déclare Shakked Noy, titulaire d’un doctorat. étudiant au département d’économie du MIT, co-auteur de l’article avec son collègue Ph.D. étudiant Whitney Zhang ’21. « Je pense que ce que notre étude montre, c’est que ce type de technologie a des applications importantes dans le travail des cols blancs. C’est une technologie utile. Mais il est encore trop tôt pour dire si ce sera bon ou mauvais, ou comment exactement cela va amener la société à ajuster. »
Simulation de travail pour les chatbots
Pendant des siècles, les gens ont craint que les nouvelles avancées technologiques n’entraînent une automatisation massive et des pertes d’emplois. Mais les nouvelles technologies créent également de nouveaux emplois, et lorsqu’elles augmentent la productivité des travailleurs, elles peuvent avoir un effet net positif sur l’économie.
« La productivité est une priorité pour les économistes lorsqu’ils envisagent de nouveaux développements technologiques », déclare Noy. « La vision classique en économie est que la chose la plus importante que fait le progrès technologique est d’augmenter la productivité, dans le sens de nous permettre de produire une production économique plus efficacement. »
Pour étudier l’effet de l’IA générative sur la productivité des travailleurs, les chercheurs ont confié à 453 spécialistes du marketing, rédacteurs de subventions, consultants, analystes de données, professionnels des ressources humaines et gestionnaires diplômés d’université, deux tâches d’écriture spécifiques à leur profession. Les tâches de 20 à 30 minutes comprenaient la rédaction de lettres d’accompagnement pour les demandes de subvention, des e-mails sur la restructuration organisationnelle et des plans d’analyse aidant une entreprise à décider à quels clients envoyer des notifications push en fonction des données client données. Des professionnels expérimentés dans les mêmes professions que chaque participant ont évalué chaque soumission comme s’ils la rencontraient dans un cadre de travail. Les évaluateurs ne savaient pas quelles soumissions avaient été créées à l’aide de ChatGPT.
La moitié des participants ont eu accès au chatbot ChatGPT-3.5, développé par la société OpenAI, pour la deuxième mission. Ces utilisateurs ont terminé les tâches 11 minutes plus vite que le groupe témoin, tandis que leurs évaluations de qualité moyennes ont augmenté de 18 %.
Les données ont également montré que l’inégalité de performance entre les travailleurs a diminué, ce qui signifie que les travailleurs qui ont reçu une note inférieure dans la première tâche ont davantage bénéficié de l’utilisation de ChatGPT pour la deuxième tâche.
Les chercheurs disent que les tâches étaient largement représentatives des affectations que ces professionnels voient dans leur travail réel, mais ils ont noté un certain nombre de limites. Parce qu’ils utilisaient des participants anonymes, les chercheurs ne pouvaient pas exiger de connaissances contextuelles sur une entreprise ou un client spécifique. Ils devaient également donner des instructions explicites pour chaque mission, alors que les tâches du monde réel peuvent être plus ouvertes. De plus, les chercheurs ne pensaient pas qu’il était possible d’engager des vérificateurs des faits pour évaluer l’exactitude des résultats. La précision est un problème majeur pour les technologies d’IA génératives d’aujourd’hui.
Les chercheurs ont déclaré que ces limitations pourraient réduire le potentiel d’augmentation de la productivité de ChatGPT dans le monde réel. Pourtant, ils pensent que les résultats montrent la promesse de la technologie – une idée soutenue par une autre des conclusions de l’étude : les travailleurs exposés à ChatGPT pendant l’expérience étaient deux fois plus susceptibles de déclarer l’utiliser dans leur vrai travail deux semaines après l’expérience.
« L’expérience démontre qu’elle apporte des avantages significatifs en termes de vitesse, même si ces avantages sont moindres dans le monde réel, car vous devez passer du temps à vérifier les faits et à écrire les invites », déclare Noy.
Prendre la vue macro
L’étude a offert un examen approfondi de l’impact que des outils comme ChatGPT peuvent avoir sur certaines tâches d’écriture. Mais extrapoler cet impact pour comprendre l’effet de l’IA générative sur l’économie est plus difficile. C’est ce sur quoi les chercheurs espèrent travailler ensuite.
« Il y a tellement d’autres facteurs qui vont affecter les salaires, l’emploi et les changements entre les secteurs qui nécessiteraient des éléments de preuve qui ne figurent pas dans notre article », a déclaré Zhang. « Mais l’ampleur du gain de temps et l’augmentation de la qualité sont très importantes dans notre journal, il semble donc que cela soit assez révolutionnaire, du moins pour certains types de travail. »
Les deux chercheurs conviennent que, même s’il est admis que ChatGPT augmentera la productivité de nombreux travailleurs, il reste encore beaucoup à faire pour déterminer comment la société devrait réagir à la prolifération de l’IA générative.
« La politique nécessaire pour s’adapter à ces technologies peut être très différente en fonction des résultats des recherches futures », explique Zhang. « Si nous pensons que cela va augmenter les salaires des travailleurs les moins bien rémunérés, c’est une implication très différente que si cela va augmenter les inégalités salariales en augmentant les salaires de ceux qui gagnent déjà beaucoup. Je pense qu’il y a beaucoup d’effets économiques et politiques en aval qui sont importants à cerner. »
Plus d’information:
Shakked Noy et al, Données expérimentales sur les effets de productivité de l’intelligence artificielle générative, Science (2023). DOI : 10.1126/science.adh2586
Cette histoire est republiée avec l’aimable autorisation de MIT News (web.mit.edu/newsoffice/), un site populaire qui couvre l’actualité de la recherche, de l’innovation et de l’enseignement au MIT.