Y a-t-il jusqu'à présent une IA qui a réussi le test MIST?

11

MIST est un test quantitatif d'humanité, composé de ~ 80k propositions telles que:

  • La Terre est-elle une planète?
  • Le soleil est-il plus grand que mon pied?
  • Les gens mentent-ils parfois?
  • etc.

À ce jour, une IA a-t-elle tenté et réussi ce test?

Kenorb
la source

Réponses:

8

Oui, bien que l'utilité de cette IA soit une autre question.

mpgac est un "AGI minimalement intelligent" formé sur le corpus GAC-80K de questions MIST. En conséquence, il devrait être en mesure de passer "au minimum" ce test. Cependant, être formé sur le corpus GAC-80K le fait évidemment manquer à toutes fins pratiques. Du README:

De toute évidence, cela ne devrait être capable de produire un signal minimalement intelligent que lorsque des questions de bon sens ordinaires sont posées, du type décrit ci-dessus, en utilisant des questions qui auraient eu un sens pour un humain moyen entre les années 2000 et 2005. Sur les connaissances d'experts ou les affaires courantes liées des questions qu'il ne devrait pas faire mieux que le hasard.

Le but de mpgac est de le comparer à d'autres IA qui pourraient être construites pour passer ce test. Ou comme l'écrivain l'a écrit dans le README:

Lors du balayage du ciel, comment savoir si les signaux radio détectés proviennent d'une source intelligente ou s'il s'agit simplement de bruit de fond ou de capteur?

Idéalement, vous voudriez construire un programme qui soit "meilleur" que mpgac. De la même manière qu'ELIZA peut être considérée comme une référence pour le test de Turing, mpgac est la référence pour le test MIST.

Le dépôt GitHub de mpgac (ainsi que le corpus GAC-80K) est disponible ici .

SE gauche sur 10_6_19
la source
2

Je crois que c'est exactement le genre de test où le cyc de Doug Lenat ferait très bien? Mais je ne peux pas répondre à la question: quelle proportion de ce corpus pourrait-il répondre correctement? Probablement beaucoup! (et combien d'humains pourraient passer ce test? probablement pas tous, mais beaucoup le peuvent ...)

[mais le cyc est-il considéré comme une IA? probablement pas ... donc je suis peut-être hors sujet. Mais imo sa base de données devrait être intégrée à toute IA qui atteint une sorte d '"intelligence" ...]

Olivier Dulac
la source