研究发现:ChatGPT回答编程问题错误率超过50%:据新浪科技,美国普渡大学的研究发现,OpenAI开发的人工智能聊天机器人ChatGPT在回答软件编程问题时,错误率超过一半,但仍能骗过三分之一的提问...
研究发现:ChatGPT回答编程问题错误率超过50%:据新浪科技,美国普渡大学的研究发现,OpenAI开发的人工智能聊天机器人ChatGPT在回答软件编程问题时,错误率超过一半,但仍能骗过三分之一的提问者。该研究团队分析了ChatGPT对517个StackOverflow网站上的问题的回答,评估了其正确性、一致性、全面性和简洁性。他们还对回答进行了语言和情感分析,并对12名志愿参与者进行了问卷调查。研究报告的结论是:ChatGPT的回答虽然语言风格良好,但52%的回答是错误的,77%是冗长的。参与者只有在回答中的错误很明显时,才能识别出来。否则,他们会被ChatGPT的友好、权威和细致的语言风格所误导。
最新评论