Une machine peut-elle penser ?Il manque la compréhension

La chambre chinoise

La chambre chinoise (Searle)

John Searle 1932 · 2025La conscience est un fait réel et irréductible de la vie intérieure ; la nier, c'est ne pas voir ce qu'on a sous les yeux.
Voir sa fiche
Ce qu'il soutient

Exécuter un programme ne suffit pas à comprendre. Aucun programme, à lui seul, ne fait un esprit : il faudrait autre chose, comme les pouvoirs causaux d'un cerveau.

Pourquoi

Un programme manipule des signes d'après leur forme seule, ce qui ne suffit pas à en comprendre le sens.

La même idée à travers l'histoire
Gottfried Wilhelm Leibniz1714Leibniz imagine un moulin : si on entrait dans une machine qui pense, on ne verrait que des pièces qui se poussent, jamais une perception. L'idée est proche : regarder le mécanisme ne montre pas la compréhension.
John Searle1980Dans l'article de la revue Behavioral and Brain Sciences, Searle imagine un homme enfermé dans une pièce, qui reçoit des caractères chinois et un manuel de règles en anglais, et qui renvoie des réponses sans comprendre le chinois.
John Searle1990Dix ans plus tard, dans Scientific American, Searle résume le raisonnement en quelques axiomes : les programmes sont formels, les esprits ont un contenu, la syntaxe ne suffit pas à produire du sens. C'est la forme que nous présentons.
En bref

« La chambre chinoise » est un argument de John Searle (« Minds, Brains, and Programs », 1980 ; « Is the Brain's Mind a Computer Program? », 1990, 1980) sur la question « Une machine peut-elle penser ? » (réponse : il manque la compréhension). Sa thèse : Exécuter un programme ne suffit pas à comprendre. Aucun programme, à lui seul, ne fait un esprit : il faudrait autre chose, comme les pouvoirs causaux d'un cerveau. Selon la vérification logique d'AskPhilosophy (solveur Z3), la conclusion suit bien de ses 3 prémisses. AskPhilosophy présente 6 objections, dont 5 avec une réponse documentée, et le texte original de chaque prémisse, vérifié mot pour mot.

« Minds, Brains, and Programs », 1980 ; « Is the Brain's Mind a Computer Program? », 1990
Valide

Imaginez que vous êtes enfermé dans une pièce. Par une fente, on vous passe des textes en chinois, que vous ne savez pas lire : pour vous, ce sont des dessins. Vous avez un gros manuel de règles, écrit en français, qui dit : « quand tu reçois telle suite de signes, renvoie telle autre suite ». Vous suivez les règles et vous renvoyez des signes. De l'extérieur, vos réponses sont celles d'un vrai locuteur chinois. Mais vous, vous n'avez pas compris un mot. John Searle (1980) en tire que même un ordinateur qui réussirait le test de Turing ne comprendrait rien : il ferait comme vous, il suivrait des règles sur des formes. Le sens, lui, ne vient pas des règles seules. L'argument vise la thèse de l'IA « forte » (penser, c'est exécuter le bon programme), pas l'idée qu'une machine puisse un jour penser. Searle dit lui-même qu'un cerveau est une machine qui pense.

P1Un programme est purement formel : il dit quels signes produire à partir de quels signes, d'après leur forme. Celui qui l'exécute n'a besoin de connaître le sens d'aucun signe.
P2Un esprit qui comprend a du sens : quand je comprends une phrase, je sais ce qu'elle veut dire. C'est ce qui distingue ma lecture de l'anglais de ma lecture des signes chinois.
P3Manipuler des signes d'après leur forme ne suffit pas à en comprendre le sens (la syntaxe ne suffit pas à la sémantique). Dans la chambre, j'ai tout ce qu'un programme peut donner, et pourtant je ne comprends rien.
Donc exécuter un programme ne suffit pas à comprendre. Aucun programme, à lui seul, ne fait un esprit : il faudrait autre chose, comme les pouvoirs causaux d'un cerveau.

clique sur une prémisse pour la rejeter

Si tu acceptes toutes les prémisses, la logique t'oblige à accepter la conclusion. Le débat porte donc sur les prémisses.
Vérifié par un solveur logique : impossible que toutes les prémisses soient vraies et la conclusion fausse.
L'argument est valide : si un programme seul est formel (P1), si le formel ne donne pas le sens (P3) et si un esprit qui comprend a du sens (P2), alors un programme seul n'est pas un esprit. Le débat porte sur P3. Searle la prouve par l'expérience de pensée, ses adversaires disent que l'expérience ne prouve rien, ou qu'elle ne vise pas le bon système.
Analogie. Quelqu'un qui recopie très bien une partition sans savoir lire la musique ne joue pas de musique. Recopier des formes n'est pas comprendre. Reste à savoir si cette analogie convient à un système immense et rapide.

Objections

6

Chaque objection est une conversation : clique pour voir qui répond, et où en est le débat.

La réponse du système (Berkeley) 1980 · attaque la prémisse 3

L'homme seul ne comprend pas le chinois, c'est vrai. Mais il n'est qu'une partie d'un ensemble : l'homme, le manuel, le papier, les listes de signes. C'est cet ensemble qui comprend, comme un neurone ne comprend rien et pourtant un cerveau, si.

Searle répond
John Searle 1980
Searle répond : que l'homme apprenne par cœur le manuel et les listes, et fasse tous les calculs dans sa tête. Il contient alors tout le système. Il ne comprend toujours rien au chinois, donc le système non plus, puisqu'il n'y a rien dans le système qui ne soit pas en lui.
Daniel Dennett et Douglas Hofstadter 1981
Dennett et Hofstadter répondent que l'expérience trompe l'intuition. On s'identifie à l'homme, qui n'est qu'une petite pièce, comme le processeur d'un ordinateur, et on imagine un petit manuel. Or un programme capable de converser comme un Chinois serait immensément complexe. Que l'homme ne comprenne pas ne dit pas ce que fait le système qu'il fait tourner.
Voir la suite du débat (1)
John Searle 1980
Searle avait prévu l'idée d'un sous-système qui comprendrait le chinois sans que l'homme le sache. Il répond que le seul motif de le croire est que le système réussit le test de Turing, ce qui est justement la question en débat : la réponse du système suppose ce qu'il fallait prouver.
Où en est le débat (notre résumé)Point de désaccord de fond : la compréhension peut-elle être une propriété d'un système dont aucune partie ne comprend ? Pour les partisans du système, oui, comme pour un cerveau. Pour Searle, il faut montrer qu'un tel système comprend, et non le supposer. Aucun camp n'a emporté le débat.
L
La réponse du robot (Yale) 1980 · attaque la prémisse 2

Mettons l'ordinateur dans un robot, avec une caméra, des bras et des jambes. Le robot voit, agit, vit dans le monde. Le sens vient du lien avec les choses, pas des seuls signes : le robot, lui, comprendrait.

Searle répond
John Searle 1980
Searle note d'abord que cette réponse admet déjà que penser n'est pas seulement manipuler des signes. Puis il remet l'homme dans la pièce : certains signes viennent de la caméra, d'autres commandent les moteurs, mais lui l'ignore. Ces capacités ajoutent des signes, pas de compréhension.
Où en est le débat (notre résumé)Point de désaccord de fond : le lien avec le monde fait-il le sens ? Searle estime que ce lien arrive lui aussi sous forme de signes. D'autres, comme les tenants de la cognition incarnée, jugent qu'un corps et une vie font une vraie différence. Point ouvert : pas de réponse largement acceptée.
La réponse du simulateur de cerveau (Berkeley et MIT) 1980 · attaque la prémisse 3

Écrivons un programme qui simule, neurone par neurone, le cerveau d'un locuteur chinois. Il prend du chinois en entrée, imite la structure de ses synapses et rend du chinois. Refuser de dire qu'il comprend, ce serait refuser de le dire du cerveau lui-même.

Searle répond
John Searle 1980
Searle répond avec des tuyaux d'eau : l'homme manœuvre des robinets qui imitent les synapses. Les bonnes réponses sortent, mais ni l'homme ni les tuyaux ne comprennent. La simulation copie la mauvaise chose du cerveau : sa forme, pas ses propriétés causales, qui produisent l'intentionnalité.
Paul et Patricia Churchland 1990
Les Churchland répondent que la chambre de Searle est un calculateur qui traite les signes un par un. Un cerveau travaille avec des millions de connexions en parallèle, et les réseaux de neurones aussi. Ce n'est pas la machine que l'expérience met à l'épreuve : le test ne prouve rien contre un système parallèle.
Voir la suite du débat (1)
John Searle 1990
Searle répond avec une « salle de gym chinoise » : un grand nombre d'hommes, chacun jouant le rôle d'un neurone, travaillent en parallèle. Aucun ne comprend le chinois, et la salle non plus. Le parallélisme ne change rien, car la salle ne fait toujours que des opérations formelles.
Où en est le débat (notre résumé)Point de désaccord de fond : une simulation parfaite d'un cerveau reproduit-elle ce qui compte, ou seulement sa forme ? Searle dit que la simulation ne reproduit pas les pouvoirs causaux du cerveau, comme la simulation d'un orage ne mouille personne. Ses adversaires disent que seule l'organisation compte. Point ouvert.
L
La réponse des autres esprits (Yale) 1980 · attaque la conclusion

Comment savez-vous que les autres comprennent le chinois, ou quoi que ce soit ? Seulement par leur comportement. L'ordinateur peut réussir les mêmes tests. Si on attribue la pensée aux autres sur cette base, il faut l'attribuer aussi à l'ordinateur. C'est la position de Turing : le test de comportement est notre seul critère.

Searle répond
voir l'argument
John Searle 1980
Searle répond que le problème n'est pas de savoir comment on sait que les autres pensent, mais ce qu'on leur attribue quand on dit qu'ils pensent. Un calcul et ses résultats peuvent exister sans état de pensée : le comportement ne peut donc pas être ce qu'on attribue.
Où en est le débat (notre résumé)Point de désaccord de fond : le comportement est-il tout ce qu'on peut savoir de la pensée d'autrui, ou en est-il seulement le signe ? Searle dit que la question n'est pas de savoir comment on attribue la pensée, mais ce qu'on attribue. Point ouvert.
Paul et Patricia Churchland (la chambre lumineuse) 1990 · attaque la prémisse 3

Imaginons quelqu'un qui agite un aimant dans une pièce sombre : aucune lumière n'apparaît. Faut-il conclure que la lumière n'est pas faite d'ondes électromagnétiques ? Non : la pièce est trop lente. De même, l'expérience de Searle, trop lente, ne montre pas que la syntaxe ne peut jamais produire du sens.

Searle répond
John Searle 1990
Searle répond que l'analogie ne marche pas : les ondes électromagnétiques ont des pouvoirs physiques, alors que les symboles n'ont aucune propriété physique qui produise du sens. Pour lui, la syntaxe n'existe pas dans la nature : c'est l'observateur qui voit un ordinateur comme calculant.
Où en est le débat (notre résumé)Point de désaccord de fond : P3 est-elle un fait établi ou une intuition ? Searle la tient pour une vérité de logique, les Churchland pour une affaire empirique. Point ouvert : pas de réponse largement acceptée.
Daniel Dennett 1980 · attaque la conclusion

L'idée d'un pouvoir spécial du cerveau, qui fabriquerait de l'« intentionnalité » comme du lait, n'est pas expliquée : Searle ne dit pas ce que serait ce pouvoir. Pour Dennett, le cerveau est une machine aussi, et rien n'interdit qu'une autre machine fasse la même chose.

sans réponse
Searle n'a pas répondu à cette objection.
Où en est le débat (notre résumé)Point de désaccord de fond : Searle doit-il dire de quoi sont faits les « pouvoirs causaux » du cerveau ? Il répond que c'est une question de biologie, pas de philosophie. Ses adversaires jugent que sans réponse, sa conclusion reste incomplète. Point ouvert.