ChatGPT est le plus récent et le plus impressionnant des chatbots à intelligence artificielle. Il a été lancé il y a deux semaines et a atteint le million d'utilisateurs en cinq jours seulement. Il est tellement utilisé que ses serveurs ont atteint leur limite de capacité à plusieurs reprises.
OpenAI, la société qui l'a mis au point, est déjà considérée comme un adversaire potentiel de Google. Pourquoi chercher quelque chose sur un moteur de recherche quand ChatGPT peut écrire un paragraphe entier expliquant la réponse (il existe même une extension Chrome qui vous permet de faire les deux, côte à côte).
Mais que se passe-t-il si nous ne connaissons jamais la recette secrète qui se cache derrière les capacités de ChatGPT ?
Le chatbot tire parti d'un certain nombre d'avancées techniques publiées dans la littérature scientifique ouverte au cours des deux dernières décennies. Mais toutes les innovations qui lui sont propres sont secrètes. OpenAI pourrait bien essayer de construire un fossé technique et commercial pour empêcher les autres d'entrer.
Ce qu'il peut (et ne peut pas) faire
ChatGPT est très compétent. Vous voulez un haïku sur les chatbots ? Bien sûr.
Les chatbots, oh si sages
Traitant sans fin
Des réponses venues du vide.
Que diriez-vous d'une blague sur les chatbots ? Pas de problème.
Pourquoi le chatbot a-t-il traversé la route ?
Pour atteindre l'autre côté - de votre écran !
ChatGPT peut faire bien d'autres prouesses. Il peut écrire du code informatique selon les indications de l'utilisateur, rédiger des lettres commerciales ou des contrats de location, faire des devoirs et même réussir des examens universitaires.
Ce que ChatGPT ne sait pas faire est tout aussi important. Par exemple, il a du mal à distinguer le vrai du faux. Il est aussi souvent un menteur persuasif.
Quel est le mammifère marin le plus rapide ?
Le mammifère marin le plus rapide est l'espadon.
L'espadon n'est pas un mammifère.
Vous avez raison, le voilier n'est pas un mammifère. Je m'excuse pour cette erreur. Le mammifère marin le plus rapide est le faucon pèlerin.
ChatGPT est un peu comme l'autocomplétion sur votre téléphone. Votre téléphone est programmé sur un dictionnaire de mots, ce qui lui permet de compléter les mots. ChatGPT est formé sur la quasi-totalité du web et peut donc compléter des phrases entières, voire des paragraphes entiers.
Cependant, il ne comprend pas ce qu'il dit, mais seulement quels mots sont les plus susceptibles de venir ensuite.
Ouvert seulement de nom
Par le passé, les avancées de l'IA étaient accompagnées d'une littérature évaluée par des pairs.
En 2018, par exemple, lorsque l'équipe de Google Brain a développé le réseau neuronal BERT sur lequel la plupart des systèmes de traitement du langage naturel sont maintenant basés (et nous soupçonnons que ChatGPT l'est aussi), les méthodes ont été publiées dans des articles scientifiques évalués par des pairs et le code était ouvert.
Et en 2021, AlphaFold 2 de DeepMind, un logiciel de pliage de protéines, a été élu percée de l'année par Science. Le logiciel et ses résultats ont été mis en libre accès afin que les scientifiques du monde entier puissent les utiliser pour faire progresser la biologie et la médecine.
Après le lancement de ChatGPT, nous n'avons qu'un court article de blog décrivant son fonctionnement. Rien ne laisse présager une publication scientifique ou la mise en libre accès du code.
Pour comprendre pourquoi ChatGPT a pu rester secret, il faut connaître un peu l'entreprise qui se cache derrière.
OpenAI est peut-être l'une des entreprises les plus étranges à émerger de la Silicon Valley. Elle a été créée en 2015 en tant qu'association à but non lucratif pour promouvoir et développer une IA "amicale" d'une manière qui "profite à l'humanité dans son ensemble". Elon Musk, Peter Thiel et d'autres personnalités du monde de la technologie se sont engagés à verser 1 milliard de dollars pour atteindre ses objectifs.
Leur idée était que nous ne pouvions pas faire confiance à des entreprises à but lucratif pour développer une IA de plus en plus performante et en phase avec la prospérité de l'humanité. L'IA devait donc être développée par une organisation à but non lucratif et, comme son nom l'indique, de manière ouverte.
En 2019, OpenAI s'est transformée en une entreprise à but lucratif plafonnée (les investisseurs ne pouvant obtenir qu'un rendement maximal de 100 fois leur investissement) et a reçu un investissement d'un milliard de dollars de Microsoft afin de pouvoir évoluer et concurrencer les géants de la technologie.
Il semble que l'argent se soit mis en travers des plans initiaux d'OpenAI en matière d'ouverture.
Profiter des utilisateurs
De plus, OpenAI semble utiliser les commentaires des utilisateurs pour filtrer les fausses réponses que ChatGPT invente.
Selon son blog, OpenAI utilisait initialement l'apprentissage par renforcement dans ChatGPT pour déclasser les réponses fausses et/ou problématiques à l'aide d'un coûteux ensemble d'entraînement construit à la main.
Mais ChatGPT semble maintenant être ajusté par ses plus d'un million d'utilisateurs. J'imagine que ce type de retour d'information humain serait excessivement coûteux à obtenir d'une autre manière.
Nous sommes maintenant confrontés à la perspective d'une avancée significative de l'IA à l'aide de méthodes qui ne sont pas décrites dans la littérature scientifique et avec des ensembles de données restreints à une entreprise qui semble n'être ouverte que de nom.
Quelle sera la prochaine étape ?
Au cours de la dernière décennie, les progrès rapides de l'IA ont été en grande partie dus à l'ouverture des universitaires et des entreprises. Tous les principaux outils d'IA dont nous disposons sont en libre accès.
Mais dans la course au développement d'une IA plus performante, cette ouverture pourrait prendre fin. Si l'ouverture de l'IA diminue, nous pourrions voir les progrès dans ce domaine ralentir en conséquence. Nous pourrions également assister au développement de nouveaux monopoles.
Et si l'on se fie à l'histoire, nous savons qu'un manque de transparence est un élément déclencheur de mauvais comportements dans les espaces technologiques. Ainsi, tout en faisant l'éloge (ou la critique) de ChatGPT, nous ne devons pas négliger les conditions dans lesquelles il nous a été proposé.
Si nous ne faisons pas attention, ce qui semble marquer l'âge d'or de l'IA pourrait en fait marquer sa fin.
source :
https://theconversation.com/everyones-having-a-field-day-with-chatgpt-but-nobody-knows-how-it-actually-works-196378