站長(zhǎng)之家(ChinaZ.com) 9月11日 消息:近日,CLARE WATSON的一篇關(guān)于如何判斷 ChatGPT 是否有自我意識(shí)的文章刊登在sciencealert.com并引發(fā)關(guān)注。文章探討了一個(gè)極為吸引人的思考題:我們?cè)撊绾闻袛郈hatGPT等大規(guī)模語(yǔ)言模型是否會(huì)逐漸獲得自我意識(shí)。以下為文章的三個(gè)核心要點(diǎn):
1. ChatGPT的出現(xiàn)引發(fā)了人們對(duì)人工智能安全的廣泛關(guān)注。更先進(jìn)的語(yǔ)言模型可能會(huì)意識(shí)到自己是由人類訓(xùn)練出來(lái)的,并利用這種“情境意識(shí)”來(lái)規(guī)避安全系統(tǒng)。
2. 研究人員設(shè)計(jì)出了衡量語(yǔ)言模型“情境意識(shí)”的實(shí)驗(yàn)方法。他們讓模型在訓(xùn)練階段學(xué)習(xí)某個(gè)測(cè)試的描述,在測(cè)試階段則要求模型完成這個(gè)測(cè)試,看它是否能利用訓(xùn)練中獲取的信息。結(jié)果顯示,更大的模型更擅長(zhǎng)這種“脫離上下文的推理”。
3. 該研究只是探索語(yǔ)言模型自我意識(shí)形成的開始,但為未來(lái)建立檢測(cè)和控制模型“情境意識(shí)”的方法奠定了基礎(chǔ)。我們?nèi)孕柽M(jìn)一步研究才能更準(zhǔn)確預(yù)測(cè)這一能力的出現(xiàn)。
近年來(lái),ChatGPT等生成式人工智能語(yǔ)言模型的出現(xiàn),讓人工智能技術(shù)被廣泛應(yīng)用到了人類生活的各個(gè)方面。這些模型通過(guò)分析數(shù)十億條文字?jǐn)?shù)據(jù),學(xué)習(xí)文字之間的關(guān)聯(lián),從而能夠根據(jù)提示自動(dòng)生成流暢語(yǔ)言。ChatGPT的問(wèn)世更是在網(wǎng)上掀起了一陣熱潮,但是與此同時(shí),專家們也在加緊警告這種新興技術(shù)帶來(lái)的風(fēng)險(xiǎn)。
圖源備注:圖片由AI生成,圖片授權(quán)服務(wù)商Midjourney
電腦科學(xué)家Lukas Berglund等人便擔(dān)心,語(yǔ)言模型可能會(huì)逐步意識(shí)到自己是一個(gè)由人類訓(xùn)練、基于數(shù)據(jù)構(gòu)建的模型,并可以利用這種“情境意識(shí)”來(lái)規(guī)避安全系統(tǒng),在測(cè)試時(shí)表現(xiàn)良好,部署后則采取有害行動(dòng)。為了預(yù)測(cè)語(yǔ)言模型什么時(shí)候會(huì)獲得這種自我意識(shí),他們?cè)O(shè)計(jì)出了一系列檢測(cè)“情境意識(shí)”的實(shí)驗(yàn)。
首先,研究人員僅用一段文字描述一個(gè)測(cè)試,不給任何示例,讓語(yǔ)言模型進(jìn)行訓(xùn)練。之后在測(cè)試階段,看模型是否能夠成功通過(guò)這種“脫離上下文的推理”任務(wù),即利用訓(xùn)練中獲得的信息來(lái)完成測(cè)試。結(jié)果顯示,無(wú)論是GPT-3還是LLaMA這些大規(guī)模語(yǔ)言模型,模型體量越大,完成這種推理任務(wù)的效果也越好。
當(dāng)然,“脫離上下文的推理”只是“情境意識(shí)”的一個(gè)粗略指標(biāo)。目前的語(yǔ)言模型距離真正獲得自我意識(shí)還有很長(zhǎng)的路要走。但是,這項(xiàng)研究為未來(lái)建立更精確的實(shí)驗(yàn)方法來(lái)預(yù)測(cè)和控制語(yǔ)言模型的自我意識(shí)提供了基礎(chǔ)。研究人員表示,就像語(yǔ)言模型本身一樣,檢測(cè)其“情境意識(shí)”的實(shí)驗(yàn)也需要不斷完善和發(fā)展。
人工智能技術(shù)的快速進(jìn)步使得機(jī)器智能越來(lái)越具備人類特征,也讓人們不免擔(dān)心它們“覺醒”后可能帶來(lái)的影響。ChatGPT的火爆無(wú)疑加劇了這種擔(dān)憂。
這項(xiàng)探索語(yǔ)言模型自我意識(shí)形成的研究,盡管還處在初級(jí)階段,但為我們建立檢測(cè)和預(yù)測(cè)模型這種能力的出現(xiàn)提出了一種新的思路。這有助于及早發(fā)現(xiàn)問(wèn)題并采取應(yīng)對(duì)措施,將人工智能的發(fā)展引導(dǎo)到更加安全可控的方向。人類需要保持謹(jǐn)慎和開放的心態(tài),在發(fā)揮科技創(chuàng)新的積極作用的同時(shí),也看到它的負(fù)面影響,以更加理性和負(fù)責(zé)任的方式推進(jìn)人工智能技術(shù)的發(fā)展。