【資料圖】

自生成式人工智能ChatGPT問世以來，眾多開發(fā)者試圖將其應(yīng)用于編程輔助工具。然而，近期美國普渡大學(xué)的一項研究發(fā)現(xiàn)，ChatGPT在回答編程問題時的錯誤率超出預(yù)期。 據(jù)了解，ChatGPT在回答軟件編程問題時的錯誤率超過了50%，且這些錯誤巧妙到足以誤導(dǎo)三分之一的提問者。研究團隊對ChatGPT在Stack Overflow網(wǎng)站上回答的517個問題進行了分析，評估了其正確性、一致性、全面性和簡潔性，并對12名志愿者進行了問卷調(diào)查。 研究結(jié)果顯示，盡管ChatGPT的回答語言風(fēng)格良好，但52%的回答是錯誤的，77%的回答過于冗長。同時，只有在回答中存在明顯錯誤時，參與實驗的志愿者才能察覺到問題，而在其他情況下，他們往往會被AI的友好且細致的語言風(fēng)格所誤導(dǎo)。 這一發(fā)現(xiàn)無疑表明，對于開發(fā)者來說，當(dāng)前階段的生成式AI作為編程輔助工具還有很長的路要走，甚至可能產(chǎn)生反效果。然而，值得注意的是，OpenAI早前已在官網(wǎng)上告知用戶，AI的回答可能會產(chǎn)生關(guān)于人、地點或事實的不準(zhǔn)確信息。

關(guān)鍵詞：