Une expérience du MIT montre que les outils d’IA tels que ChatGPT peuvent considérablement stimuler la productivité et la qualité du travail des professionnels qualifiés, en particulier ceux dont les compétences sont plus faibles.
L’étude, menée par Shakked Noy et Whitney Zhang du département d’économie du Massachusetts Institute of Technology, a porté sur 453 professionnels diplômés de l’enseignement supérieur dans des domaines tels que le marketing, l’analyse de données et les ressources humaines, à qui l’on a confié des tâches de rédaction incitatives.
Parmi ceux qui ont utilisé ChatGPT avec GPT 3.5, la productivité a augmenté de manière significative – le travail a été achevé 40 % plus rapidement et la qualité de la production s’est améliorée de 18 %.
Les professionnels formés à l’université qui effectuaient des tâches de rédaction professionnelle de niveau intermédiaire ont considérablement augmenté leur productivité en ayant accès à ChatGPT. L’outil de rédaction générative a permis d’améliorer la qualité du travail pour les employés moins qualifiés et de réduire le temps consacré aux tâches pour les travailleurs de tous les niveaux de compétence.
Extrait de l’article
Les participants assignés à l’utilisation de ChatGPT ont déclaré apprécier davantage leurs tâches et étaient deux fois plus susceptibles de continuer à utiliser l’outil d’IA dans leur emploi réel deux semaines après l’expérience, et 1,6 fois plus susceptibles de continuer à l’utiliser deux mois plus tard. Cela suggère que les outils d’IA comme ChatGPT peuvent être une ressource précieuse pour les professionnels dans une variété de domaines.
ChatGPT excelle dans la rédaction claire et persuasive
Les tâches proposées aux participants, telles que la rédaction de communiqués de presse ou de courts rapports analytiques, ont été conçues pour ressembler à des tâches réelles qu’ils pourraient rencontrer dans leur travail quotidien. Ces tâches ont permis d’exploiter les points forts de ChatGPT, notamment la rédaction claire et convaincante.
La moitié des participants ont été assignés au hasard à un groupe qui pouvait utiliser l’outil d’IA dans leur deuxième tâche. L’autre moitié formait le groupe de contrôle et a reçu l’instruction d’utiliser un outil différent (non basé sur l’IA), mais n’a pas été encouragée à l’utiliser dans ses tâches.
Le travail de ces professionnels a ensuite été évalué par d’autres professionnels du même domaine. Il leur a été demandé de juger le travail en se rapprochant le plus possible de ce qu’ils rencontreraient dans leur environnement professionnel habituel. Ils ont évalué la qualité du travail sur une échelle de 1 à 7.
Les chercheurs ont recueilli des données et des informations sur le temps que les participants ont consacré aux tâches et sur la qualité de leur travail. Ils ont également suivi la progression du travail des participants tout au long de la tâche afin de mesurer les niveaux d’activité et de vérifier s’ils utilisaient l’outil d’IA.
En outre, ils ont enregistré certaines variables contextuelles, telles que le taux d’abandon et le statut professionnel, et ont vérifié s’il s’agissait de professionnels des ressources humaines. L’idée était de vérifier si ces facteurs externes pouvaient affecter les résultats, et ils ont constaté que ces variables n’avaient pas d’impact significatif sur les résultats.
L’étude a toutefois révélé certaines limites : l’outil d’IA était moins adapté aux tâches nécessitant des connaissances contextuelles ou une exactitude factuelle précise, ou encore aux invites plus vagues nécessitant beaucoup d’initiative.
Malgré ces limites, de nombreux participants ont déclaré avoir trouvé ChatGPT utile dans leur travail réel, ce qui suggère que même les nouvelles versions de l’outil peuvent être de plus en plus utiles. Par exemple, il est possible d’apprendre à ChatGPT à utiliser des facteurs contextuels dans ses réponses, ce qui le rend potentiellement utile dans un nombre croissant de professions.
Si les outils d’IA tels que ChatGPT ne rendent pas les experts humains obsolètes, les données de cette étude suggèrent qu’ils peuvent compléter les compétences humaines, en augmentant la productivité et en réduisant les inégalités entre les travailleurs.
Un résultat contradictoire est que les participants qui ont utilisé ChatGPT ont généralement envoyé le résultat de l’IA avec peu ou pas d’édition, ce qui suggère que la technologie dans cette expérience a remplacé, plutôt que complété, l’effort humain.
Quoi qu’il en soit, les résultats de l’étude de Noy et Zhang ne donnent qu’un aperçu des effets immédiats sur la productivité des outils d’IA tels que ChatGPT ; ils n’abordent pas les effets potentiels à long terme sur les marchés du travail et les structures organisationnelles. La mesure dans laquelle les TPG peuvent être améliorés est l’une des questions clés de leur impact.
Le monde réel est plus complexe que le cadre de l’étude
Les chercheurs relèvent plusieurs limites à leur travail. L’étude s’est principalement concentrée sur des tâches spécifiques qui nécessitaient une écriture générique – claire, persuasive et ne dépendant pas d’un contexte significatif.
Si ChatGPT a excellé dans ce type de tâches, la plupart des projets professionnels du monde réel exigent des connaissances spécifiques au contexte et un degré élevé d’exactitude factuelle, domaines dans lesquels l’itération actuelle des outils d’écriture IA tels que ChatGPT peut s’avérer insuffisante, comme nous l’avons mentionné plus haut.
Bon nombre des tâches auxquelles sont confrontés les professionnels peuvent comporter des objectifs et des instructions plus ambigus, où la créativité humaine, l’adaptabilité et les compétences décisionnelles peuvent s’avérer essentielles. Contrairement aux travailleurs humains, les outils d’IA ne peuvent pas comprendre pleinement les nuances subtiles et les complexités des tâches ou s’adapter d’eux-mêmes lorsque les instructions ne sont pas précises.
Une autre limite importante est la dépendance de l’expérience à l’égard des incitations directes basées sur les performances, sous la forme de primes pour un travail de qualité. En plus d’un paiement de base de 10 dollars, les participants pouvaient recevoir une prime supplémentaire allant jusqu’à 14 dollars en fonction de la qualité de leur travail, dans le but d’encourager les performances élevées. Ces primes à court terme peuvent ne pas refléter fidèlement les incitations du monde réel, qui comprennent souvent des perspectives de promotion à long terme, des objectifs de développement professionnel et l’importance de maintenir un style ou une marque personnelle, écrivent les chercheurs. Ces incitations à long terme peuvent en fait réduire l’utilité des outils d’écriture artificielle tels que ChatGPT.
L’omission la plus flagrante, me semble-t-il, est que l’étude n’a pas pris en compte le temps et les efforts nécessaires pour vérifier les faits produits par ChatGPT.
Dans l’ensemble, nous pensons que, par rapport à nos résultats expérimentaux, les effets directs du ChatGPT sur la productivité de l’économie réelle seront un peu moins importants et que la technologie sera plus fortement complémentaire des travailleurs humains. La question de savoir dans quelle mesure cela est vrai reste ouverte.
Extrait de l’article
Si les outils d’IA peuvent accélérer le processus et même améliorer la qualité de l’écriture, la nécessité de vérifier les faits peut l'emporter sur ces avantages en termes de gain de temps, en particulier pour les tâches qui exigent une exactitude factuelle précise. Les progrès futurs de la technologie de l’IA devraient s’améliorer considérablement dans ce domaine pour être plus fiables.
L’impact potentiel de l’IA sur le marché du travail
Selon les chercheurs, le potentiel d’augmentation de la demande de services à mesure qu’ils deviennent moins chers grâce à la productivité accrue de l’IA est un facteur essentiel qui influencera les effets des technologies d’IA telles que le ChatGPT sur la productivité.
Par exemple, si le prix des services de planification devait diminuer de manière significative en raison de l’efficacité de l’IA, cela pourrait entraîner une augmentation de la demande et, par conséquent, une augmentation de l'emploi dans le secteur. Toutefois, cela pourrait ne pas être le cas pour des professions telles que la publicité ou la communication. La demande pourrait rester stable et l'emploi pourrait diminuer car moins de travailleurs seraient nécessaires.
L’introduction de l’IA peut également affecter la composition de la main-d’œuvre. Les rôles au sein des organisations pourraient changer, étant donné la créativité et le jugement requis dans des professions telles que la publicité. La question est de savoir si, par exemple, les postes subalternes pourraient être consacrés au perfectionnement des résultats de l’IA, tandis que les postes supérieurs fourniraient un apport conceptuel. Cela pourrait remodeler de manière significative le fonctionnement des industries et la manière dont elles emploient les gens.
Le rôle de l’IA dans des domaines tels que la programmation pourrait avoir des conséquences différentes sur les salaires. Si l’outil d’IA nécessite un programmeur expert pour examiner ses résultats et affiner les instructions, les salaires peuvent augmenter en raison de la demande accrue de professionnels spécialisés. Toutefois, si seules des compétences de base en programmation sont requises pour travailler avec l’IA, il pourrait en résulter une offre excédentaire de programmeurs qualifiés, ce qui pourrait entraîner une baisse des salaires en dépit d’une augmentation de la productivité.
Les pratiques traditionnelles de promotion et d'embauche peuvent également être affectées par l’adoption généralisée des technologies d’IA telles que le ChatGPT. Par exemple, les outils d’IA peuvent modifier la manière dont les performances sont évaluées en enregistrant et en observant les employés. Ce processus peut affecter les échelles de salaire et les pratiques d'embauche, ainsi que modifier la culture organisationnelle autour de l’effort et de la performance. Avec des informations provenant de The Decoder.