Exigences spécifiques du test de Turing


9

Quelles sont les exigences spécifiques du test de Turing?

  • Quelles sont les exigences éventuelles que l'évaluateur doit remplir pour être qualifié pour passer le test?
  • Doit-il toujours y avoir deux participants à la conversation (un humain et un ordinateur) ou peut-il y en avoir plus?
  • Les tests placebo (où aucun ordinateur n'est réellement impliqué) sont-ils autorisés ou encouragés?
  • Peut-il y avoir plusieurs évaluateurs? Dans l'affirmative, la décision doit-elle être unanime parmi tous les évaluateurs pour que la machine ait réussi le test?

Réponses:


9

Le «test de Turing» est généralement considéré comme une version mise à jour du jeu d'imitation Alan Turing proposé dans son article du même nom de 1951. Une première version avait un humain (homme ou femme) et un ordinateur, et un juge devait décider qui est lequel, et quel sexe ils étaient s'ils étaient humains. S'ils étaient corrects à moins de 50%, alors l'ordinateur était considéré comme "intelligent".

La version généralement acceptée actuelle ne nécessite qu'un seul concurrent et un juge pour décider s'il s'agit d'un humain ou d'une machine. Alors oui, parfois ce sera un placebo, effectivement, si l'on considère un humain comme un placebo.

Vos première et quatrième questions sont liées - et il n'y a pas de directives strictes. Si l'ordinateur peut tromper un plus grand nombre de juges, il sera bien sûr considéré comme une meilleure IA.

L'Université de Toronto a une section de validité dans cet article sur Turing , qui comprend un lien vers le commentaire de Jason Hutchens sur les raisons pour lesquelles le test de Turing peut ne pas être pertinent (les humains peuvent également échouer) et le prix Loebner , une instanciation formelle d'un Turing Testez.


2

Il y a vraiment deux questions ici, que je vois. L'une est "quelles étaient les exigences spécifiques du test de Turing d'origine, comme l'a déclaré Turing lui-même?" L'autre est "Quelles devraient être les exigences spécifiques d'un test de Turing moderne?" Les choses ont beaucoup progressé depuis l'époque de Turing, et je pense qu'il est raisonnable pour nous d'envisager d'étendre / modifier son test pour refléter notre compréhension actuelle.

La réponse à la première question est assez facile à rechercher, donc je pense que la question intéressante est la deuxième. À quoi devrait ressembler un test pour déterminer l'intelligence? Dans cet esprit, je pense que la réponse aux quatre questions posées par le PO est "cela dépend". Je ne pense pas qu'il existe un consensus universel sur la façon de structurer un test de Turing parfait, donc un expérimentateur donné est vraiment libre de configurer les choses comme il le souhaite.

Tout cela est, bien sûr, basé sur l'hypothèse que le test de Turing ou un test de type test de Turing a réellement de la valeur. Ce n'est pas nécessairement une donnée. Considérez que, dans une certaine mesure, ce dont nous parlons est de concevoir une IA avec une capacité exceptionnelle de tromperie! Autrement dit, en supposant que le questionneur est autorisé à simplement demander "êtes-vous humain", alors nous devons supposer que l'IA est censée mentir si elle veut passer le test. On peut donc à juste titre se demander si la conception d'un système pour être vraiment bon pour mentir, une approche précieuse de l'IA?


0

Si vous voulez comprendre la relativité, lisez Einstein 1,2 , pas un livre sur la relativité écrit par un professeur qui pense qu'il l'a. Si vous voulez comprendre le test d'intelligence d'Alan Turing dans le contexte du dialogue humain, lisez Turing. 3 Les interprétations peuvent être pires qu'inutiles. Ils sont souvent trompeurs. Si les principes semblent trop épais, relisez-les jusqu'à ce que vous les obteniez.

Dans le cas du test d'intelligence de Turing dans le contexte du dialogue humain, pour bien le comprendre, le contexte suivant est supposé lorsque Turing a écrit, qui, si vous lisez son article de 1950, deviendra apparent.

  • Comment le théorème d'exhaustivité de Turing répond au deuxième théorème d'incomplétude de Kurt Gödel
  • La stratégie d'un test contrôlé
  • La différence entre (a) entendre et parler et (b) écouter et répondre avec esprit - Ceci est particulièrement pertinent aujourd'hui parce que les chat-bots font (a) et pourraient être de 5 à 500 ans loin de faire (b). Pour atteindre (c) une compréhension profonde et une réponse inspirante, les chercheurs en IA doivent aller au-delà de la modélisation de l'esprit humain et relever le défi de modéliser l'esprit de personnes comme Gödel, Einstein et Turing. Reste à savoir si cela se produira.

Les exigences spécifiques du jeu d'imitation, le sous-titre d'Alan Turing au-dessus de la description de son expérience de pensée, sont une question de record.

Exigences spécifiques [Extrait de l'article réel]

[Le jeu d'imitation] se joue avec trois personnes, un homme (A), une femme (B) et un interrogateur (C) qui peuvent être de l'un ou l'autre sexe. L'interrogateur reste dans une pièce à part devant les deux autres. Le but du jeu pour l'interrogateur est de déterminer lequel des deux autres est l'homme et lequel est la femme. Il les connaît par les étiquettes X et Y, et à la fin du jeu, il dit que "X est A et Y est B" ou "X est B et Y est A." L'interrogateur est autorisé à poser des questions à A et B ainsi:

C: X pourra-t-il me dire la longueur de ses cheveux?

Supposons maintenant que X est en fait A, alors A doit répondre. Le but de A dans le jeu est d'essayer de provoquer une mauvaise identification de C. Sa réponse pourrait donc être:

"Mes cheveux sont en bardeaux, et les mèches les plus longues mesurent environ neuf pouces de long."

Afin que les tonalités de voix ne puissent pas aider l'interrogateur, les réponses doivent être écrites, ou mieux encore, dactylographiées. L'arrangement idéal est d'avoir un téléimprimeur communiquant entre les deux salles. Alternativement, la question et les réponses peuvent être répétées par un intermédiaire. Le but du jeu pour le troisième joueur (B) est d'aider l'interrogateur.

La meilleure stratégie pour elle est probablement de donner des réponses véridiques. Elle peut ajouter des choses comme "Je suis la femme, ne l'écoutez pas!" à ses réponses, mais cela ne servira à rien car l'homme peut faire des remarques similaires.

Nous posons maintenant la question: "Que se passera-t-il lorsqu'une machine prendra la part de A dans ce jeu?" L'interrogateur décidera-t-il à tort aussi souvent quand le jeu se joue ainsi que quand le jeu se joue entre un homme et une femme? Ces questions remplacent notre original, "Les machines peuvent-elles penser?"

Il y a eu des milliers de critiques à la fois de la relativité d'Einstein et du test de Turing, dont aucune n'ajoute beaucoup de valeur. Étudiez la pensée de grands contributeurs à travers leurs propres mots et tous les déchets qui suivent seront intéressants principalement par son manque de grandeur.

Questions secondaires dans ce fil

Quelles sont les exigences éventuelles que l'évaluateur doit remplir pour être qualifié pour passer le test?

L'interrogateur (C) n'est pas un évaluateur. L'évaluation serait une tentative d'être objectif, mais la prémisse de l'expérience de pensée de Turing est que l'interrogateur donne son jugement subjectif. D'un point de vue statistique, l'interrogateur doit être choisi au hasard dans la population du monde qui partage une langue parlée avec (A) et (B).

Doit-il toujours y avoir deux participants à la conversation (un humain et un ordinateur) ou peut-il y en avoir plus?

Il doit y en avoir exactement deux pour correspondre au scénario décrit par Alan Turing. (Voir ci-dessous pour plus de détails.)

Les tests placebo (où aucun ordinateur n'est réellement impliqué) sont-ils autorisés ou encouragés?

On pourrait tester toutes sortes de choses, et les chercheurs le font, cependant, cela serait en dehors du cadre de l'expérience de pensée de Turing. 4

Peut-il y avoir plusieurs évaluateurs? Dans l'affirmative, la décision doit-elle être unanime parmi tous les évaluateurs pour que la machine ait réussi le test?

Ce qui révélerait le plus d'informations à ceux qui parrainent un véritable jeu d'imitation serait un test entièrement randomisé en double aveugle où (A), (B) et (C) sont tirés au hasard d'un échantillon de ces hommes, femmes ou logiciels des systèmes du type testé qui peuvent converser dans un langage commun, et le test serait exécuté plusieurs fois avec des sélections aléatoires parmi les échantillons.

L'unanimité, l'évaluation, la complexité supplémentaire et la communication autres que celles spécifiées par le test ne feraient que contrecarrer la cause, si l'on s'en tient à l'intention initiale de Turing concernant la question "Les ordinateurs peuvent-ils penser?"

Autres vues du renseignement

Turing, tout comme René Descartes, qui a déclaré que les machines ne passeront jamais une version moins contrôlée du jeu d'imitation de Turing, a vu l'intelligence à travers la lentille du dialogue. D'autres ont envisagé d'autres types de dialogue et d'autres contextes que le dialogue. J'en ai parlé dans une autre question:

Un cerveau peut-il être intelligent sans corps?

Références et notes de bas de page

[1] Relativité: le spécial et la théorie générale par Albert Einstein, 1916

[2] Le principe de relativité par Albert Einstein et Francis A. Davis, 1923

[3] AM Turing (1950) Computing Machinery and Intelligence. Mind 49: 433-460. https://www.csee.umbc.edu/courses/471/papers/turing.pdf

[4] L'article de Turing de 1950 ne recommandait pas que son expérience de pensée soit incorporée et utilisée dans la validation commerciale des futurs systèmes d'IA. Cependant, Alan Turing s'est intéressé à l'informatique pratique à un moment précis de sa carrière. C'est à ce moment-là que les nazis avaient envahi la France, pulvérisaient sa patrie des airs et avaient coulé une partie importante de la marine anglaise par le bas, avec l'aide de la cryptographie Enigma.

En utilisant notre site, vous reconnaissez avoir lu et compris notre politique liée aux cookies et notre politique de confidentialité.
Licensed under cc by-sa 3.0 with attribution required.