March 18, 2026, By Washington State University: ChatGPT Was Asked the Same Question 10 Times. The Answers Kept Changing Citat: "...However, once the results were adjusted for random guessing, the performance looked far less reliable. The AI was only about 60% better than chance, which the researchers described as closer to a low D than strong performance. The system had particular difficulty identifying false statements, correctly labeling them only 16.4% of the time. It also showed inconsistency. When given the exact same prompt 10 times, ChatGPT produced consistent results for only about 73% of the cases...“We used 10 prompts with the same exact question. Everything was identical. It would answer true. Next, it says it’s false. It’s true, it’s false, false, true. There were several cases where there were five true, five false.”...The findings reveal an important limitation of large language model AI systems. Although they can generate polished and persuasive responses, they often struggle with deeper reasoning. This can lead to answers that sound convincing but are actually incorrect, Cicek said..."
24. maj 2019, version2.dk, blog: Chatbot'en spiser mennesker Citat: "...Er min anbefaling så, at man helt skal udelukke at bruge chatbots i kundeservicefunktioner? I 9 ud af 10 tilfælde vil svaret være et rungende 'ja', men der kan være enkelte steder, hvor man måske kan få gavn af sådan et lille dyr...", backup
24. september 2019, version2.dk: Mens du venter på en chatbot der virker Citat: "...I Danmark er den velfungerende chatbot lidt ligesom som den afskyelige snemand; der er mennesker som påstår de har set den, de peger på utydelige fodspor i sneen og måske kan de fremvise et sløret foto der ligner lidt, hvis man altså holder det i en bestemt vinkel og har en god fantasi. De mennesker kalder vi chatbot-sælgere...", backup
24. maj 2019, version2.dk, blog: Chatbot'en spiser mennesker Citat: "...Er min anbefaling så, at man helt skal udelukke at bruge chatbots i kundeservicefunktioner? I 9 ud af 10 tilfælde vil svaret være et rungende 'ja', men der kan være enkelte steder, hvor man måske kan få gavn af sådan et lille dyr...", backup
24. september 2019, version2.dk: Mens du venter på en chatbot der virker Citat: "...I Danmark er den velfungerende chatbot lidt ligesom som den afskyelige snemand; der er mennesker som påstår de har set den, de peger på utydelige fodspor i sneen og måske kan de fremvise et sløret foto der ligner lidt, hvis man altså holder det i en bestemt vinkel og har en god fantasi. De mennesker kalder vi chatbot-sælgere...", backup
