Une étude sur l'IA comme aide à l'écriture créative révèle que cela fonctionne, mais il y a un hic

Une nouvelle expérience d’écriture montre les limites de la « créativité » pilotée par l’IA.

Les chercheurs étudient les implications existentielles de l’IA générative, notamment si les progrès technologiques rendront réellement les humains plus créatifs ou limiteront nos points de vue.

L'étude, publiée dans Science Advances par deux chercheurs de l'University College London et de l'Université d'Exeter, a testé des centaines de nouvelles créées uniquement par des humains par rapport à celles créées avec l'aide créative de l'IA générative de ChatGPT. Un groupe d'écrivains avait accès uniquement à leurs propres idées, un deuxième groupe pouvait demander à ChatGPT une idée d'histoire et un troisième pouvait travailler avec un ensemble de cinq suggestions créées par ChatGPT. Les histoires ont ensuite été évaluées en fonction de « la nouveauté, de l'utilité (c'est-à-dire de la probabilité de publication) et du plaisir émotionnel », a rapporté TechCrunch.

« Ces résultats indiquent une augmentation de la créativité individuelle au risque de perdre la nouveauté collective », peut-on lire dans l’étude. « Cette dynamique ressemble à un dilemme social : avec l’IA générative, les auteurs s’en sortent mieux individuellement, mais collectivement, un champ de contenu novateur plus restreint est produit. »

Les participants ont été « évalués » en termes de créativité avant la séance d’écriture, à l’aide d’une tâche de production de mots couramment utilisée, qui permet d’établir un standard de créativité parmi les répondants. Ceux qui ont obtenu des résultats inférieurs à ces tests de créativité par procuration ont obtenu de meilleurs résultats sur leur écriture personnelle lorsqu’ils ont eu accès aux idées générées par l’IA. Mais pour ceux qui avaient déjà des scores de créativité élevés, les idées de l’IA n’ont eu que peu ou pas d’effet sur l’évaluation de leur histoire.

De plus, les histoires générées par l'IA sont considérées comme moins diversifiées et présentent des caractéristiques d'écriture moins uniques, ce qui suggère les limites de l'ingéniosité globale de ChatGPT. Les résultats littéraires de la nouvelle étude ajoutent aux inquiétudes concernant les boucles d'entraînement auto-consommatrices de l'IA, ou le problème des modèles d'IA formés uniquement sur les sorties de l'IA qui dégradent les modèles d'IA eux-mêmes, a rapporté Cecily Mauran de Indigo Buzz.

L'auteur de l'étude, Oliver Hauser, a déclaré dans un commentaire à TechCrunch : « Notre étude représente un premier point de vue sur une très grande question sur la façon dont les grands modèles de langage et l'IA générative en général affecteront les activités humaines, y compris la créativité… Il sera important que l'IA soit réellement évaluée rigoureusement – plutôt que simplement mise en œuvre à grande échelle, sous l'hypothèse qu'elle aura des résultats positifs. »