James Randin miljoonan dollarin palkinto

[NuoriD]

http://www.ruudwetzels.com//articles/Wa ... l_subm.pdf

No ni!

[RP]

Ei aukea mulla, mitä tuossa on. Kertokaa!

[sivustahuutaja]

Ei aukea mulla, mitä tuossa on. Kertokaa!

Consider now the possibility that the gambler could use psi to bet on the color that
will shortly come up, that is, the color that will bring great wealth in the immediate future.
In this context, even small effects of psi result in substantial payoffs. For instance, suppose
a player with psi can anticipate the correct color in 53.1% of cases—the mean percentage
correct across participants for the erotic pictures in Bem’s Experiment 1. Assume that this
psi-player starts with only 100 euros, and bets 10 euro every time. The gambling stops
whenever the psi-player is out of money (in which case the casino wins) or the psi-player
has accumulated one million euros. After accounting for the house advantage, what is the
probability that the psi-player will win one million euros? This probability, easily calculated
from random walk theory (e.g., Feller, 1970, 1971) equals 48.6%. This means that, in this
case, the expected profit for a psychic’s night out at the casino equals $485,900. If Bem’s
psychic plays the game all year round, never raises the stakes, and always quits at a profit
of a million dollars, the expected return is $177,353,500.

Clearly, Bem’s psychic could bankrupt all casinos on the planet before anybody realized
what was going on. This analysis leaves us with two possibilities. The first possibility
is that, for whatever reason, the psi effects are not operative in casinos, but they are operative
in psychological experiments on erotic pictures.

[NuoriD]

Ei aukea mulla, mitä tuossa on. Kertokaa!

Tilastototieteen kurssista on jo 20 vuotta aikaa ja kaikki ei aukea, mutta huomioita:

Bem ei etukäteen päättänyt mitä tutkii, vaan teki erilaisia testejä ja testaili, saiko jostain niistä merkittäviä tuloksia. Eli näytettiin mm. positiivisia kuvia, negatiivisia kuvia, pornokuvia, neutraaleja kuvia ja romanttisia kuvia. Sitten katsottiin, tulisiko jollain näistä tilastollisesti merkitseviä tuloksia. Pornokuville saatiin tilastollisesti merkittävä tulos. Artikkeli kritisoi sitä, että pitäisi etukäteen päättää, mitä tutkitaan, eikä tehdä lukuisia eri testejä ja sitten katsoa, josko jostain tulisi merkitsevä tulos.

Kun asiaa tutkitaan p-arvoilla, jotka ainoastaan kertovat, kuinka suuri on todennäköisyys, että tulos saadaan sattumalta, tämä on huono tutkimusasetelma. Jos tehdään monia toisistaan riippumattomia testejä, niin on täysin selvä, että jossain niissä saadaan sattumalta merkitsevä tulos, jos asiaa testataan riittävän monta kertaa. Bem ei myöskään kerro, mitä kaikkia asioita hän on testannut hakiessaan tilastollisesti merkitseviä tuloksia.

Itse muistan hyvin tilastotieteen kurssilta sen opetuksen, että kun random-dataa pyörittää riittävästi ja testaa eri muuttujia keskenään, niin aina sattumalta saa jonkun tilastollisesti merkitsevän tuloksen.

Lisäksi kritisoidaan sitä, että että täytyy ottaa huomioon myös todennäköisyys ennen testiä, ei pelkästään se, tukeeko havainto hypoteesia.

Jos esim. asetamme hypoteesin, että kotitontut keilaavat Pupun kodin ullakolla ja sitten päätämme tutkia, kuuluuko ullakolta kolinaa ja toteamme ullakolta tosiaan kuuluvan kolinaa, voimme sanoa, että kolina sopii hyvin yhteen em. hypoteesin kanssa ja puhuu sitä vastaan, että kotitontut eivät keilaisi ullakolla. Tämä ei kuitenkaan muuta sitä tosiasaa, että on hyvin epätodennäköistä, että tontut keilaisivat Pupun kodin ullakolla, koska em. hypoteesin todennäköisyys on niin alhainen ennen testausta. Eli jos väitteen etukäteistodennäköisyys on hyvin alhainen, täytyy todisteiden olla hyvin vahvoja, jotta testin jälkeenkin todennäköisyys ei olisi edelleen hyvin alhainen.

Eli jälleen "extraordinary claims require extraordinary evidence".

Kirjoittaja myös laskee, että jos rulettia pelatessa pystyisi ennalta 53.1%:n todennäköisyydellä (pornokuvien oikein osunut veikkausprosentti) tietämään, pysähtyykö kuula mustalle vai punaisella ja aloittaisi sadalla eurolla ja lopettaisi aina rahojen loppumiseen, tai kun miljoona euroa on tullut täyteen, niin keskivertoillan tulos olisi 485900 euroa. Jostain syystä maailman kasinot kuitenkin edelleen tuottavat voittoa.

Viimeisen kritiikin yksityiskohdat menevät yli hilseeni, mutta siinä kritisoidaan valittua tilastollista analyysia ja todetaan, että kirjoittajan mielestä paremmin tutkimusasetelmaan soveltuva The Bayesian t-Test antaa tulokset, joiden mukaan tulokset eivät tue hypoteesia Psi-kyvyistä.