GPT-4調(diào)用插件40次依然不成功經(jīng)常出現(xiàn) 無效調(diào)用拒絕回答等

2023-08-13 15:56:54 編輯：公孫素琳來源：

導(dǎo)讀來自紐約大學(xué)的 Ernest Davis、德克薩斯大學(xué)奧斯汀分校的Scott Aaronson，給ChatGPT背后的大模型GPT-4調(diào)用的插件做了一次摸底考試。在本...

來自紐約大學(xué)的 Ernest Davis、德克薩斯大學(xué)奧斯汀分校的Scott Aaronson，給ChatGPT背后的大模型GPT-4調(diào)用的插件做了一次摸底考試。在本次測(cè)試中，帶有任一插件的GPT-4明顯強(qiáng)于GPT公司本身，而且可以確定GDP-4強(qiáng)于一年前存在的AI。但是GPT-4的可靠性還遠(yuǎn)遠(yuǎn)不夠，經(jīng)常會(huì)出現(xiàn)輸出錯(cuò)誤的答案以及無法輸出任何答案的情況。

從研究中可以看出，GPT-4和插件之間有很大的改進(jìn)空間。GPT-4調(diào)用相關(guān)插件40次，試圖要選取某個(gè)事件的日期，但最終都沒有成功，只能選擇放棄，沒有插件的GPT-4都能明確指出該事件的日期。 GPT-4在使用的過程中，并不能充分利用插件的功能。通常在人類傾向于使用空間可視化解決問題上表現(xiàn)出較弱的一方，并且不擅長(zhǎng)解決涉及組合多種不同類型的計(jì)算問題。

標(biāo)簽： GPT-4、調(diào)用插件