Série
L'industrie de l'intelligence
Une histoire des réseaux de neurones, de 1943 à aujourd'hui, en épisodes.
- En cours
- 27 épisodes
- 707 min de lecture
Ce feuilleton raconte, dans l'ordre où elles se sont produites, les inventions qui ont mené du premier neurone artificiel aux grands modèles de langage. Chaque épisode part d'un problème concret, montre comment on l'a résolu, et ce que la solution a coûté. Aucun fait n'y figure sans source.
-
Je n’ai pas découvert l’IA avec ChatGPT
Ingénieur en robotique, j'ai passé douze ans à côtoyer l'intelligence artificielle là où elle est indissociable d'une carte électronique et d'un budget de calcul. Ce dossier…
-
Février 2012 : une voiture qui n’apprenait rien
En février 2012, une voiture roulait seule sur une autoroute californienne sans avoir rien appris : tout y était écrit à la main, règle après règle.…
-
D’un neurone à un réseau : ce qui s’apprend et circule
Que gagne-t-on à mettre plusieurs neurones les uns derrière les autres ? Ce chapitre suit ce qui entre dans un réseau, ce qui passe d'une rangée…
-
Des rangées de nombres : ce qu’on gagne et ce qu’on perd
Une machine ne voit ni image ni phrase : elle ne manipule que des tableaux de chiffres. Ce chapitre montre ce que cette conversion permet —…
-
Rosenblatt, et le livre qui a enterré son perceptron
En 1957, dans un laboratoire aéronautique de l'État de New York, une machine apprend au lieu d'être programmée. Ce chapitre raconte le perceptron, l'enthousiasme qu'il souleva,…
-
La rétropropagation, ou l’art de répartir les torts
Un réseau profond se trompe : comment savoir quel réglage corriger, et de combien ? La réponse porte un nom, la rétropropagation du gradient. Ce chapitre…
-
LeCun, les codes postaux et l’idée de regarder par bouts
Relier chaque point d'une image à chaque neurone donne un compte que les machines de l'époque ne pouvaient pas tenir. Ce chapitre explique l'idée qui lève…
-
Pourquoi cela n’a pas suffi : le prix d’un essai
L'idée marchait, et elle n'a convaincu personne. Ce chapitre explique pourquoi : trois jours de calcul par expérience, aucune épreuve commune pour départager les méthodes, et…
-
Le deuxième enterrement : deux famines, quinze ans
Pendant quinze ans, les réseaux de neurones ont perdu contre d'autres méthodes. Ce chapitre montre que la théorie n'était pas en cause : il manquait des…
-
2012 : trois ingrédients arrivent en même temps
En 2012, une longue traversée du désert prend fin, et aucune idée neuve n'y est pour rien. Ce chapitre raconte comment trois ingrédients disponibles séparément depuis…
-
Des mots dans une géométrie, et une mémoire qui fuit
Numéroter le vocabulaire ne mène nulle part : rien ne garantit que deux numéros voisins désignent deux mots voisins. Ce chapitre explique comment on donne aux…
-
2017 : l’attention devient toute l’architecture
En 2017, huit chercheurs de Google publient un article dont le titre annonce déjà la conclusion. Ce chapitre explique ce que leur architecture supprime, ce qu'elle…
-
Ce qui a vraiment tout changé : le parallélisme
Cette architecture est célèbre pour sa qualité de langue ; sa conséquence la plus lourde est ailleurs. Ce chapitre montre comment le fait d'examiner tout un…
-
Prédire le mot suivant : d’où vient le texte
Une seule consigne suffit à l'entraînement : deviner la suite d'un texte qu'on donne à lire. Ce chapitre explique d'où vient ce texte, ce que cette…
-
Les lois d’échelle : quand la mesure devient un devis
À partir d'une certaine taille, les modèles se mettent à faire des choses que personne n'a demandées. Ce chapitre explique les lois d'échelle — la relation…
-
Du prompt à l’assistant : comment on parle à un modèle
Longtemps, modifier un réseau a voulu dire corriger ses poids, et rien d'autre. Ce chapitre raconte l'apparition d'une seconde voie — écrire une consigne en langue…
-
Ce qui se passe quand vous appuyez sur Entrée
Vous tapez une question et vous attendez quelques secondes. Ce chapitre explique ce qui se passe pendant ces secondes, et pourquoi quatre notions suffisent à comprendre…
-
Le nerf de la guerre : faire baisser la facture
Chaque mot produit par un modèle a un coût, et toute une industrie s'est constituée pour le réduire. Ce chapitre passe en revue ces techniques d'efficacité,…
-
L’autre branche : quand la machine s’est mise à fabriquer
Repérer ce qui se répète et savoir le produire relèvent du même geste. Ce chapitre raconte la branche parallèle de cette histoire, celle des machines qui…
-
Ce que la fabrication a changé dehors
Fin 2018, une vidéo présidentielle soupçonnée de trucage précède une tentative de coup d'État. Ce chapitre raconte ce que la fabrication automatique d'images a changé hors…
-
Les pistes exotiques, et ce qu’un modèle ne peut pas savoir
Neuromorphique, photonique, quantique : trois promesses de calcul reviennent dans chaque vague d'annonces. Ce chapitre sépare, pour chacune, ce qui a été mesuré de ce qui…
-
La fenêtre de contexte : tout ce que le modèle voit
En dehors de sa fenêtre de contexte, un modèle ne connaît rien. Ce chapitre explique ce que cette contrainte impose, comment elle est passée de trois…
-
Quand le modèle délègue : les outils, et la seconde facture
Un modèle bien renseigné reste immobile tant qu'on ne lui donne pas à faire. Ce chapitre explique comment il en vient à appeler des outils, à…
-
Le classement dit qui gagne, pas si ça marche chez vous
Le meilleur modèle d'un palmarès déçoit sur votre cas : ni lui ni le palmarès ne sont en cause. Ce chapitre explique ce qu'un banc d'essai…
-
Qui a gagné, qui a résisté : la vraie carte du marché
Quand une technique en remplace une autre, l'ancienne ne disparaît pas toujours. Ce chapitre montre que trois issues seulement se présentent — le remplacement, la coexistence,…
-
Puces, fonderies et énergie : la carte sous la carte
La carte des usages en cache une seconde, beaucoup plus concentrée. Ce chapitre descend d'un étage, jusqu'aux maillons que presque personne ne peut fabriquer soi-même, et…
-
Ce que quatorze ans d’IA nous ont appris
Quatorze ans après un cours en ligne sur les filtres particulaires, le dossier revient à sa question de départ : qui possède les machines, et qui…


