圖片來源：COREDESIGN/SHUTTERSTOCK
本報訊 只需敲幾下鍵盤，任何人都可以要求ChatGPT等人工智能（AI）程序寫一篇論文，或創作一首歌曲、一部戲劇，但不要指望它具有威廉·莎士比亞的獨創性。一項新研究發現，這種AI產出的作品仍然是衍生品——至少目前是這樣。
近日，研究人員設計出一個能夠衡量AI創造力的程序。英國倫敦大學學院的計算機科學家Mirco Musolesi表示，衡量創造力非常困難但很有趣，新方法至少很好地解決了一個創造力問題——語言是否具有新穎性。
自從ChatGPT等程序誕生以來，科學家一直對它們的能力持懷疑態度。盡管運行這種生成式AI和大型語言模型（LLM）可以瞬間生成非常像人類寫作的東西，但一些人認為，LLM并沒有產生任何新東西——它們只是“隨機鸚鵡”，盲目地將訓練過的單詞拼湊在一起。
但客觀地測試AI的創造力一直很棘手。科學家通常采取兩種策略，一種是使用其他計算機程序搜索抄襲的跡象，盡管沒有抄襲并不等于有創造力；另一種是人工判斷AI的輸出，對流暢性和原創性等因素進行評分，但這種做法主觀且耗時。
因此，美國華盛頓大學的計算機科學家陸錫明（音）和同事創建了一個既客觀又有細微差別的程序——DJ搜索。該程序可以從AI輸出的任何內容中收集最小長度的文本片段，并在大型在線數據庫中檢索它們。“DJ搜索”不僅能找到相匹配的文本片段，還會掃描與文本含義相似的字符串。在刪除所有匹配項后，該程序通過計算剩余文本與原始文檔長度的比率，最終估算出AI輸出的新穎程度。
研究人員將出版的小說、詩歌和演講的語言新穎性與LLM作品進行了比較。他們在OpenReview上公布的一份預印本中報告稱，人類在詩歌、小說和演講方面的得分分別比AI高出約80%、100%和150%。該研究目前正在接受同行評審。
雖然“DJ搜索”是為了比較人和機器而設計的，但它也可以用來比較兩個或更多的人類作品。例如，蘇珊·柯林斯的小說《饑餓游戲》在語言原創性方面比斯蒂芬妮·邁耶的熱門小說《暮光之城》高出35%。
那么，LLM僅僅就是“鸚鵡”嗎？“它們從現有的文字中復制、粘貼、剪切和拼湊出一些令人驚嘆的東西，就像一個DJ對現有音樂進行混音。這絕對有價值，但它與作曲家不同。”陸錫明說。
美國加州大學洛杉磯分校的計算機科學家彭楠赟認為AI的敘事性較差，研究人員接下來應該關注的不僅是語言的新穎性，還有整個敘事結構的新穎性。（李木子）
相關論文信息：
https://doi.org/10.1007/s00146-024-02127-3
《中國科學報》(2025-01-02第2版國際)