Le succès de ChatGPT aurait pu arriver plus tôt, déclare un ancien chercheur de Google en IA



Mais c'était en réalité motivé par une énorme opportunité, mais aussi par une obligation morale dans un sens, de faire quelque chose qui était mieux fait à l'extérieur afin de concevoir de meilleurs médicaments et d'avoir un impact très direct sur la vie des gens.

Ars : Ce qui est drôle avec ChatGPT, c'est que j'utilisais GPT-3 avant ça. Ainsi, lorsque ChatGPT est sorti, ce n’était pas si grave pour certaines personnes familiarisées avec la technologie.

JU : Ouais, exactement. Si vous avez déjà utilisé ces éléments auparavant, vous pourriez voir la progression et extrapoler. Quand OpenAI a développé les premiers GPT avec Alec Radford et ces gens-là, nous parlions de ces choses-là même si nous n'étions pas dans les mêmes entreprises. Et je suis sûr qu'il y avait ce genre d'enthousiasme, à quel point le produit ChatGPT serait bien accueilli par le nombre de personnes et à quelle vitesse. Je pense que c'est quelque chose que personne n'avait vraiment prévu.

Ars : Moi non plus quand je l'a couvert. C'était comme : “Oh, c'est un hack chatbot de GPT-3 qui alimente son contexte en boucle.” Et je ne pensais pas que c'était un moment décisif à l'époque, mais c'était fascinant.

JU : Il existe différents types de percées. Ce n’était pas une avancée technologique. Ce fut une avancée majeure dans la prise de conscience qu’à ce niveau de capacité, la technologie avait une telle utilité.

Cela, et la prise de conscience que, parce que vous devez toujours prendre en compte la manière dont vos utilisateurs utilisent réellement l'outil que vous créez, et que vous ne pouvez pas prévoir à quel point ils seraient créatifs dans leur capacité à l'utiliser, quelle est l'étendue de ces cas d'utilisation. sont, et ainsi de suite.

C'est quelque chose que l'on ne peut parfois apprendre qu'en publiant quelque chose, c'est aussi pourquoi il est si important de rester heureux de l'expérience et de l'échec. Parce que la plupart du temps, ça ne marchera pas. Mais parfois, ça va marcher – et très, très rarement, ça va marcher comme [ChatGPT did].

Ars : Il faut prendre un risque. Et Google n’avait pas envie de prendre des risques ?

JU : Pas à ce moment-là. Mais si vous y réfléchissez, si vous regardez en arrière, c'est en fait très intéressant. Google Traductionsur lequel j'ai travaillé pendant de nombreuses années, était en fait similaire. Lorsque nous avons lancé Google Translate pour la première fois, les toutes premières versions, c'était au mieux une plaisanterie de fête. Et nous sommes passés de là à quelque chose qui est devenu un outil vraiment utile en peu de temps. Au cours de ces années, les contenus qu'il produisait parfois étaient si embarrassants, mais Google l'a quand même fait parce que c'était la bonne chose à essayer. Mais c'était vers 2008, 2009, 2010.