Flapping Airplanes: pourquoi Sequoia parie sur la science plutôt que sur l'emballage

Commençons par dire que le nom Flapping Airplanes est un subtle trolling de toute l'industrie moderne de l'intelligence artificielle. Si vous vous souvenez de l'histoire de l'aviation, les premiers inventeurs essayaient de construire des avions aux ailes battantes, copiant littéralement les mouvements des oiseaux. C'était logique, mais cela fonctionnait terriblement.

Le véritable progrès dans le vol n'est venu que lorsque les gens ont compris les principes de l'aérodynamique, qui se sont avérés être bien plus importants que l'imitation externe de la nature. Les modèles de langage d'aujourd'hui ressemblent à bien des égards à ces mêmes machines « aux ailes battantes » : elles imitent magistralement la parole humaine, mais nous ne comprenons toujours pas complètement comment naît leur intelligence et où se situent les limites de leur utilité.

Le lancement du nouveau laboratoire Flapping Airplanes avec le soutien de Sequoia Capital n'est pas simplement une autre ligne dans les nouvelles infinies sur les transactions de capital-risque. C'est un symptôme clair que la Silicon Valley s'est lassée des enveloppes infinies autour de l'API d'OpenAI. En ce moment, chaque deuxième startup essaie de nous vendre un autre assistant IA pour la planification de calendrier ou la rédaction d'e-mails, en utilisant les mêmes modèles de base. Mais les partenaires de Sequoia semblent avoir trouvé une nouvelle tendance : un retour à la science fondamentale. Ils investissent dans une équipe qui ne promet pas de lancer un produit en un mois, mais envisage de repenser l'architecture même des réseaux de neurones.

Pourquoi cela se produit-il maintenant ? La réponse réside dans ce qu'on appelle le plafond d'extensibilité. Au cours des dernières années, l'industrie a vécu selon un principe très simple : ajoutez simplement plus de cartes graphiques et plus de données, et le modèle deviendra plus intelligent.

Cela fonctionnait sans faille. Mais maintenant, le coût de formation des nouvelles générations de modèles se mesure en milliards de dollars, et les améliorations de qualité deviennent de moins en moins évidentes pour l'utilisateur final. Nous nous approchons du moment où la voie de développement extensif s'épuise.

Nous avons besoin de nouvelles idées, de nouveaux algorithmes et peut-être d'un abandon complet des transformateurs actuels au profit de quelque chose de plus efficace et plus profond.

Flapping Airplanes se positionne comme une entreprise axée sur la recherche. Traduit du langage du capital-risque en langage humain, cela signifie que la science est pour eux plus importante que le marketing et les ventes immédiates. Dans un monde où OpenAI se transforme en une gigantesque corporation orientée vers le profit, et où Google essaie de rattraper un train qui s'éloigne, ces laboratoires indépendants sont une bouffée d'air frais. Ils peuvent se permettre de faire des erreurs, de tester des hypothèses folles et de ne pas rendre compte aux actionnaires du nombre d'utilisateurs actifs par mois. C'est dans ces environnements que naissent généralement les technologies que nous considérerons comme allant de soi dans cinq à dix ans.

Il est intéressant d'observer la rapidité avec laquelle la rhétorique des grands investisseurs change. Il y a un an, tout le monde cherchait des tueurs de ChatGPT ayant des modèles commerciaux clairs et des plans de rentabilité. Aujourd'hui, Sequoia déclare ouvertement que les plus gros profits iront à ceux qui résoudront les problèmes fondamentaux de l'IA : les hallucinations, l'absence de véritable inférence logique et la consommation d'énergie monstrueuse des serveurs. Flapping Airplanes est un pari que le prochain saut qualitatif sera réalisé non par celui qui a le plus de serveurs dans son centre de données, mais par celui qui découvrira comment voler sans battre des ailes comme un oiseau.

Bien sûr, le risque ici est énorme. La science fondamentale est toujours coûteuse, longue et souvent infructueuse. Nombreux sont ces projets qui se terminent par rien, ne laissant derrière eux que des piles de beaux fichiers PDF et des investisseurs déçus. Mais si l'équipe de Flapping Airplanes trouve réellement un moyen de s'écarter de la copie aveugle des processus cognitifs humains et découvre cette aérodynamique même de l'intelligence, les règles du jeu changeront pour tous les acteurs du marché. Nous verrons enfin une transition des perroquets statistiques aux systèmes qui comprennent vraiment les relations de cause à effet et sont capables de véritables découvertes.

L'essentiel : l'industrie fait un virage vers ses racines, où les idées révolutionnaires redeviennent plus importantes que les budgets marketing. Flapping Airplanes pourra-t-il voler plus haut que les géants grâce à la pure intelligence ?