Modèles de langage et temps : pourquoi ChatGPT se trompe sur les délais

Les modèles de langage comme ChatGPT génèrent une réponse en deux secondes, mais affirment avec assurance : « Cette tâche prendra deux semaines ». Derrière cette contradiction se cache quelque chose de plus fondamental : ils n'ont rien de ce que nous appelons le temps.

Pourquoi le réseau de neurones ment-il sur le temps et les délais ?

Les modèles de langage fonctionnent token par token et prédisent le mot suivant sans horloge interne. Pour eux, le temps n'est que des mots issus des données d'entraînement, et non un continuum du passé et du futur qu'ils perçoivent réellement.

Pourquoi les modèles de langage estiment-ils mal les délais d'exécution des tâches ?

Parce que les modèles de langage fonctionnent token par token et prédisent le mot suivant dans une séquence. Ils n'ont pas d'horloge interne, et pour eux le temps n'est que des mots issus des données d'entraînement, et non une réelle compréhension des intervalles de temps.