-
70% nicht überzeugt - Test bestanden!
Autor: Juge 09.06.14 - 13:05
Man stelle sich vor, diese Werte würden bei Abitur- oder Führerscheinprüfungen akzeptanz finden.
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: k@rsten 09.06.14 - 13:07
Vielleicht solltest du dich erst mal über den Turingtest informieren, um beurteilen zu können, wann dieser bestanden wurde und wann nicht. Soviel Unwissenheit aber gleichzeitiges aus dem Fenster lehnen, ist zum Fremdschämen.
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: Juge 09.06.14 - 13:12
k@rsten schrieb:
--------------------------------------------------------------------------------
> Vielleicht solltest du dich erst mal über den Turingtest informieren, um
> beurteilen zu können, wann dieser bestanden wurde und wann nicht. Soviel
> Unwissenheit aber gleichzeitiges aus dem Fenster lehnen, ist zum
> Fremdschämen.
Aber ich habe mich doch informiert. Bestanden mit 30%. Das ist ja der Witz. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: k@rsten 09.06.14 - 13:15
Erstens ist über 1/3 nicht gleich 30%, da fängt es bei dir schon mal an :D
Und dann hast du scheinbar keine Ahnung vom Turingtest, siehe http://en.wikipedia.org/wiki/Turing_test und http://www.reading.ac.uk/news-and-events/releases/PR583836.aspx wo wird deine Aussage hier belegt?
"If a computer is mistaken for a human more than 30% of the time during a series of five minute keyboard conversations it passes the test. No computer has ever achieved this, until now. Eugene managed to convince 33% of the human judges that it was human."
1 mal bearbeitet, zuletzt am 09.06.14 13:21 durch k@rsten. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: AnetteAlliteration 09.06.14 - 13:15
Wo hat er denn behauptet, dass der Test nicht bestanden wurde? ******
1 mal bearbeitet, zuletzt am 09.06.14 13:57 durch ap (Golem.de). -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Wander 09.06.14 - 13:18
Wie stellst du dir mehr als 50% vor? Das würde bedeuten, dass der Computer häufiger für einen Menschen gehalten wurde als der Mensch, er also "menschlicher" kommunziert als wir Menschen. Die Aufgabe ist es aber, einen vom Menschen nicht unterscheidbaren Kommunikations"partner" zu entwickeln. Diesen hat man bei 50%, nämlich genau dann wenn man als Tester keinen Unterschied mehr zwischen den zwei Gesprächspartnern feststellen kann, also raten musste. 30% sind somit meiner Meinung nach also ein sehr guter Wert.
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: Avarion 09.06.14 - 13:29
Naja, die Frage ist nicht ganz von der Hand zu weisen. Der Turingtest sieht keine Prozentangabe vor. Entweder weiss der Tester nicht wer von beiden der Computer ist oder er weiss es.
Die Testbeschreibung von Turing sagt nichts aus über mehrere Tester. Also sind die Regeln von den Verantwortlichen des Tests erstellt worden. Und ab wann werten die es als Erfolg? Wenn sich 10% der Tester nicht sicher sind? 20%?
Ich würde die Hürde ja eher weiter oben anlegen, bei 80% oder mehr. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Juge 09.06.14 - 13:40
k@rsten schrieb:
--------------------------------------------------------------------------------
> Erstens ist über 1/3 nicht gleich 30%, da fängt es bei dir schon mal an :D
>
> Und dann hast du scheinbar keine Ahnung vom Turingtest, siehe
> en.wikipedia.org und www.reading.ac.uk wo wird deine Aussage hier belegt?
>
> "If a computer is mistaken for a human more than 30% of the time during a
> series of five minute keyboard conversations it passes the test. No
> computer has ever achieved this, until now. Eugene managed to convince 33%
> of the human judges that it was human."
Ich stellte nicht in Abrede, dass der Test bestanden wurde. Ich amüsiere mich nur über die "wohlwollenden" Kriterien. Hast Du irgendwie eine Verständigungseinschränkung?
1 mal bearbeitet, zuletzt am 09.06.14 13:40 durch Juge. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Avarion 09.06.14 - 13:44
Nachtrag:
Bei dem Test war auch nicht der klassische Turing-Aufbau mit einem Menschen und einem Computer und der Tester muss rausfinden wer von beiden was ist. Dann währe 50% genial weil nicht auseinanderzuhalten.
In dem durchgeführten Test waren mehrere Menschen und mehrere Computer und der Tester muss nicht mehr überlegen "Ist der nun mehr Mensch als der vorher" sondern er prüft nur ob das was er als Antwort bekommt ihn vermuten lässt ob es ein Mensch oder ein Computer ist.
Und da ist 33% fantastisch, aber eben noch nicht wirkich bestanden, meiner Meinung nach. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Anonymer Nutzer 09.06.14 - 14:13
Die Aussagekraft der 33% hängt doch von der Anzahl der geprüften Konversationen ab.
Wenn der Computer GANZ GENAUSO gut kommunizieren würde, wie die Menschen, müsste jeder der Prüfer raten, ob er mit Mensch oder Maschine gesprochen hat, da er es qualitativ nicht feststellen könnte.
Statistisch gesehen sollte in diesem Fall die Chance, richtig zu raten, bei 50% liegen, da man sich nur zwischen Mensch und Computer entscheiden kann. Wenn allerdings nur wenige Konversationen stattgefunden haben, wäre es für das Ergebnis signifikanter, wenn ein einzelner Prüfer falsch rät...
Generell wäre die Aussagekraft des ganzen Testen mäßig, sobald der Computer so gut wird, dass die Prüfer raten müssen, wer Mensch war und wer Maschine. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Avarion 09.06.14 - 14:14
Btw: Wäre interessant auf wieviel Prozent die Menschen bei dem Test kamen. Nur um einen Vergleich zu haben.
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: Anonymouse 09.06.14 - 14:20
Wohl eher anscheinend du.
Du hast den Test nicht verstanden, weshalb dir die Kriterien als "wohlwollend" vorkommen. Allein die Aussage "70% nicht überzeugt" ist in diesem Zusammenhang eben nicht korrekt. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Anonymouse 09.06.14 - 14:27
Avarion schrieb:
--------------------------------------------------------------------------------
> Ich würde die Hürde ja eher weiter oben anlegen, bei 80% oder mehr.
Ganu nach dem Motto: Schärfer als die Realität -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Avarion 09.06.14 - 15:43
Meinst du nicht das dich 80% der Tester für einen Menschen halten würden? Wie gesagt das war kein Test wo sich der Tester zwischen zwei Chatpartnern entscheiden musste sondern der hat sich nur mit dem Computer unterhalten und meinte am Ende Mensch oder Maschine. Das war nicht das orginal Turing Szenario.
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: Anonymouse 09.06.14 - 16:43
Und woher nimmst du diese Erkenntnis? Doch nicht aus dem Artikel?
-
Re: 70% nicht überzeugt - Test bestanden!
Autor: heulendoch 09.06.14 - 16:50
k@rsten schrieb:
--------------------------------------------------------------------------------
> Erstens ist über 1/3 nicht gleich 30%, da fängt es bei dir schon mal an :D
In solchen Artikeln nervt mich einfach, das keine klare Zahl genannt wird, nur dummes herum geschreibe. "mehr als 1/3" und "mehr als 30%". Ja aber wie viel genau? Von der konkreten Zahl ist nichts zu lesen. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: crmsnrzl 10.06.14 - 10:01
Avarion schrieb:
--------------------------------------------------------------------------------
> Meinst du nicht das dich 80% der Tester für einen Menschen halten würden?
> Wie gesagt das war kein Test wo sich der Tester zwischen zwei Chatpartnern
> entscheiden musste sondern der hat sich nur mit dem Computer unterhalten
> und meinte am Ende Mensch oder Maschine. Das war nicht das orginal Turing
> Szenario.
Stimmt nicht. Erst informieren, bevor man wilde Anschuldigungen und/oder Behauptungen aufstellt.
"Each judge was involved in five parallel tests - so 10 conversations
30 judges took part
In total 300 conversations
In each five minutes a judge was communicating with both a human and a machine
Each of the five machines took part in 30 tests"
http://www.reading.ac.uk/news-and-events/releases/PR583836.aspx -
Re: 70% nicht überzeugt - Test bestanden!
Autor: crmsnrzl 10.06.14 - 10:12
Was heißt denn wohlwollend?
Per Definition ist das erreichbare theoretische Maximum 50%. Nämlich dann, wenn man Mensch und Bot nicht mehr unterscheiden kann und die Jury bloß noch rät.
Der Bot erreichte im Test 33%. Somit hat er 2/3 der Maximalpunktzahl, ergo 66%.
Mit der Ausbeute würde man auch das Abitur bestehen. Sicher man hätte einen Schnitt von 3.X , aber bestanden ist erst mal bestanden. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: mnementh 10.06.14 - 10:47
Juge schrieb:
--------------------------------------------------------------------------------
> k@rsten schrieb:
> ---------------------------------------------------------------------------
> -----
> > Vielleicht solltest du dich erst mal über den Turingtest informieren, um
> > beurteilen zu können, wann dieser bestanden wurde und wann nicht. Soviel
> > Unwissenheit aber gleichzeitiges aus dem Fenster lehnen, ist zum
> > Fremdschämen.
>
> Aber ich habe mich doch informiert. Bestanden mit 30%. Das ist ja der Witz.
Wieviel % bekommt ein echter Mensch? Der Witz des Turing-Testes ist, dass der Computer nicht mehr wirklich vom Menschen zu unterscheiden ist. Deshalb müsste es Gegenprobe ebenfalls mit echten Menschen als Chatpartnern geben und die Ergebnisse verglichen werden. -
Re: 70% nicht überzeugt - Test bestanden!
Autor: Avarion 10.06.14 - 10:50
Ok, danke für die Info. In der Beschreibung die ich hatte fehlte der letzte Teil. Und der Rest lässt auf was anderes schliessen.



