Expérience de dégustation du pouvoir d'une dame

9

Dans la célèbre expérience de Fisher, le nombre observable de coupes corrigées ayant deux types de coupes et est observable . Habituellement, il est intéressant de calculer la région critique pour rejeter l'hypothèse nulle (la dame devine au hasard) compte tenu de la taille du test . Cela se fait facilement en utilisant la distribution hypergéométrique. De la même manière, je peux calculer la taille du test compte tenu de la région critique.A B αkABα

Une autre question est: comment calculer la puissance du test, compte tenu d'une hypothèse alternative? Supposons par exemple que la dame soit capable de deviner correctement avec probabilité sur la seule tasse ( ). Quelle est la puissance du test, en supposant un nombre total de tasses égal à et un nombre total de tasses d'un type ? (Malheureusement) la dame sait .P ( devinez A | vrai A ) = P ( devinez  B | vrai  B ) = 0,9 N = 8 n = N / 2 = 4 np=90%P(guessA|trueA)=P(guess B|true B)=0.9N=8n=N/2=4n

Autrement dit: quelle est la distribution de (nombre de tasses correctes dans l'hypothèse alternative) si la dame sait qu'il y a tasses d'une même sorte?nk=n

Ruggero Turra
la source
En pensant à votre message ... Si Fisher a décidé de rejeter le nul uniquement si la dame avait raison sur toutes ses suppositions (je pense que c'était le cas), et qu'il n'y a qu'une seule façon possible de bien remettre toutes les tasses, ne devrait pas la probabilité que cela se produise soit soit la puissance réelle? 0.94=0.6561
Antoni Parellada
Vous ne rejetez pas quand elle devine toutes les tasses en général. Mais il est vrai qu'avec c'est la région critique. Vous ne tenez pas compte du fait que la dame sait qu'il y a 4 tasses de chaque type. Soit dit en passant, je suis intéressé par la solution généraleN 8N=8N8
Ruggero Turra
1
C'est un problème intéressant mais difficile. Il est facile de déterminer les tables qui conduiraient à rejeter Ho, mais il faudrait penser à la probabilité de voir ces tables sous Ha. L'article suivant calcule la puissance d'un tableau légèrement modifié avec une sensibilité et une spécificité données: «Une généralisation de la procédure Lady-Tasting-Tea pour relier les approches qualitatives et quantitatives en recherche psychiatrique» par Falissard et al. Je ne sais pas si les calculs sont corrects. Si vous avez vraiment un problème binomial, vous pouvez utiliser le package Exact R, mais c'est un problème différent demandé
Peter Calhoun

Réponses:

3

Selon l'alternative, la dame ne devine pas au hasard, mais "ne pas deviner au hasard" couvre une infinité de situations différentes. Elle pourrait toujours deviner parfaitement ou elle pourrait faire très légèrement mieux que la devinette aléatoire ... et dans le cas général, il n'y a même pas une "échelle" à variable unique non aléatoire pour travailler (donc nous n'avons même pas de pouvoir à moins de restreindre les types de réponses non aléatoires qu'elle pourrait donner).

Donc, pour calculer une puissance, nous devons être très précis sur la façon dont elle est non aléatoire (et à quel point elle est non aléatoire de cette façon particulière).

On pourrait supposer, par exemple, qu'elle a une idée de combien chaque tasse a le goût comme le lait a été ajouté en premier - un indice de "lait d'abord" qui est une variable aléatoire sur qui a un une moyenne différente (plus élevée) lorsque le lait est ajouté en premier - par exemple, nous pouvons supposer que c'est dit normal ou logoistique, avec une moyenne et une variance ( est connu comme " précision ") lorsque le lait est ajouté en dernier et signifie et la variance lorsque le lait est ajouté en premier (en effet, une présomption plus simple mais plus restrictive pourrait être de définir, par exemple,(,)μ0σ2=1/ω2ω2μ1σ2μ1=μ0=1de sorte que tout est désormais fonction d'une variable, la précision). Donc, pour n'importe quelle valeur donnée de ces paramètres, nous pourrions calculer la probabilité qu'elle obtienne les 8 tasses correctes (que les quatre plus petites valeurs de "lait au lait" qu'elle éprouve soient associées aux quatre tasses de lait); si le calcul exact était trop difficile pour nous, nous pourrions le simuler avec la précision souhaitée. [Dans le cas où la non-aléatoire est présumée être fonction d'une seule variable, nous aurions une courbe de puissance - une valeur de puissance pour chaque valeur du paramètre.]

C'est un type spécifique de modèle sur la façon dont elle pourrait fonctionner "mieux que de façon aléatoire" avec laquelle nous pourrions spécifier des paramètres et obtenir une valeur de puissance.

On pourrait bien sûr supposer bien d'autres formes de non-aléatoire que celle-ci.

Glen_b -Reinstate Monica
la source
3

La distribution du nombre correct de suppositions sous l'hypothèse alternative suit une distribution hypergéométrique non centrale , qui est paramétrée en termes de rapport de cotes, c'est-à-dire combien sont plus élevées les chances que la dame devine "le thé d'abord" lorsqu'elle est en en fait, le thé a été ajouté en premier, contrairement au moment où le lait a été ajouté en premier (ou l'inverse). Si le rapport de cotes est 1, alors nous obtenons la distribution hypergéométrique centrale.

Voyons si cela fonctionne. Je vais utiliser R à des fins d'illustration, en utilisant le MCMCpackpackage, qui a une fonction dnoncenhypergeom()pour calculer la densité d'une distribution hypergéométrique (non centrale). Il a des arguments xpour le bon nombre de suppositions (attention: ceci est le bon nombre de suppositions dans l' une des deux conditions, par exemple, lorsque le thé est vraiment ajouté en premier), des arguments n1, n2et m1pour trois des quatre marges, et psipour le vrai rapport de cotes. Calculons la densité pour xégale à 0 à 4 (avec toutes les marges égales à 4) lorsque le rapport de cotes réel est 1:

install.packages("MCMCpack")
library(MCMCpack)
sapply(0:4, function(x) dnoncenhypergeom(x, n1=4, n2=4, m1=4, psi=1))

Cela donne:

[1] 0.01428571 0.22857143 0.51428571 0.22857143 0.01428571

Donc, il y a 1,43% de chances que la dame fasse 8 suppositions correctes (c'est-à-dire qu'elle devine correctement les 4 tasses là où le thé a été ajouté en premier et donc qu'elle devine également correctement les 4 tasses où le lait a été ajouté en premier) sous l'hypothèse nulle. Il s'agit en fait de la quantité de preuves que Fisher a jugées suffisantes pour rejeter l'hypothèse nulle.

Les probabilités spécifiées dans la question peuvent être utilisées pour calculer le rapport de cotes, à savoir (c.-à-d. ). Quelles sont les chances maintenant que la dame devine correctement les 8 tasses (c'est-à-dire qu'elle devinera correctement les 4 tasses où le thé a été ajouté en premier et donc les 4 tasses correctement où le lait a été ajouté en premier)?cotes ( devinez A | vrai A ) / cotes ( devinez A | vrai B )(.90/(1.90))/(.10/(1.10))=81odds(guessA|trueA)/odds(guessA|trueB)

dnoncenhypergeom(4, n1=4, n2=4, m1=4, psi=81)

Cela donne:

[1] 0.8312221

La puissance est donc d'environ 83%.

Wolfgang
la source