原創(chuàng) Celia Ford 神經(jīng)現(xiàn)實

想象某個周末的午后，你與朋友們身處美術(shù)館：每個人都抱著雙臂閑庭信步，頻頻點頭并熱烈發(fā)表一些有見地的評論。觀賞過的絕大多數(shù)繪畫作品會立即被遺忘，只有某些作品會留存在你的腦海中。事實證明，其他人所記住的也很有可能就是這些作品。

對應(yīng)這一現(xiàn)象的科學術(shù)語叫“圖像可記憶性”。MIT計算機科學在讀博士生、Memorable AI首席技術(shù)官卡米洛·福斯科（Camilo Fosco）認為：“從本質(zhì)上來說，圖像可記憶性指的是某些圖像內(nèi)在的模式會使這些內(nèi)容比其他內(nèi)容更加令人難忘。”福斯科的初創(chuàng)公司正利用機器學習技術(shù)來測量不同內(nèi)容對廣告商和創(chuàng)作者的吸引力。換言之，這支科學家團隊目前正在使用AI來研究某些藝術(shù)品所具有莫名的吸引力究竟是什么。

- Viktor Koen -

芝加哥大學研究人員特倫特·戴維斯（Trent Davis）和威爾瑪·班布里奇（Wilma Bainbridge）于今年7月早些時候發(fā)表在《美國國家科學院院刊》的一項研究中表明，藝術(shù)品的可記憶性水平不僅對不同的觀眾保持一致，還可以被AI預(yù)測。在一次在線實驗中，研究人員從芝加哥藝術(shù)學院的數(shù)據(jù)庫中提取了約4000幅“非知名”畫作，供超過3200人瀏覽，平均每幅畫作約被40名觀眾觀看。隨后，研究人員展示了志愿者們看過的和沒看過的繪畫組合，并詢問他們是否記得這些畫作。志愿者的表現(xiàn)非常一致：記住（或忘記）的圖像基本上是一樣的。

研究小組借助名為ResMem的深度學習神經(jīng)網(wǎng)絡(luò)，來預(yù)測每幅畫作被記住的可能性，該神經(jīng)網(wǎng)絡(luò)是庫恩·尼德爾（Coen Needell）碩士論文中的一部分，庫恩·尼德爾是班布里奇心理學實驗室的數(shù)據(jù)科學家。ResMem大致模擬了人類視覺系統(tǒng)如何將信息從視網(wǎng)膜傳遞到大腦皮層，首先處理基本信息，如邊緣、紋理和圖案等，然后再處理更抽象的信息，如畫作中物體的含義。盡管ResMem對每件藝術(shù)品的文化背景、知名度或重要性一無所知，但它對繪畫的可記憶性評分與在線實驗中志愿者們給出的評分極其接近。

上述研究結(jié)果出乎人們的意料：人們對藝術(shù)的記憶，與其對美的主觀體驗或個人經(jīng)歷關(guān)系不大，而與藝術(shù)品本身的關(guān)系更大——這一發(fā)現(xiàn)對于任何希望自己創(chuàng)作的內(nèi)容能夠留在他人大腦中的人——如藝術(shù)家、廣告商、教育工作者等，可能產(chǎn)生重大影響?！八囆g(shù)（欣賞）通常被認為是一件非常主觀的事，但人們對藝術(shù)的記憶和遺忘上的表現(xiàn)出奇一致。”班布里奇如是說。

- Sandro Rybak -

這項在線實驗是一個耐人尋味的開端，“如果人們對現(xiàn)實世界的記憶能夠被預(yù)測，就更有意思了?！卑嗖祭锲胬^續(xù)說道。戴維斯當時是一個雙學位的本科生，主修神經(jīng)科學和視覺藝術(shù)。于是班布里奇和戴維斯一起，又招募了19人，讓他們真正在博物館的美國藝術(shù)廳里閑逛，就像和朋友一起探索一樣。唯一的要求是他們對每件作品都至少看一次?！白鳛橐幻囆g(shù)家，我非常希望結(jié)果能夠應(yīng)用到現(xiàn)實世界中?！贝骶S斯已經(jīng)成為了實驗室管家，他說， “我們希望這是一個自然而愉快的博物館體驗。”

離開展廳后，每位參與者都在自己的手機上接受了記憶測試。與線上實驗的結(jié)果一樣，ResMem再一次極其準確地預(yù)測出了人們會記住哪些畫作。

這些突出的畫作有什么共同點呢? 總體來說，這些畫作可能尺寸更大，或者被更大的作品所包圍。但它們在主題、歷史時期、色調(diào)或情感主題上各不相同。因此，班布里奇的團隊進一步努力，試圖找出被試者捕捉到了什么。在第三次實驗中，另外40名在線參與者對第二次測試中現(xiàn)場參與者們所看到的畫作的美感、情感基調(diào)、熟悉度和趣味度進行了評分。結(jié)果表明，前三個因素以及顏色、亮度和雜亂程度等基本視覺特征與“被記住”關(guān)系不大， “唯一實際相關(guān)的是趣味度?！卑嗖祭锲嫒缡钦f。

- Sandro Rybak -

但很難定義究竟怎樣算“有趣”。這個模糊的詞語既可能意味著好奇，也可能意味著厭惡。班布里奇推測，人們所感受到的畫作趣味度與該畫作和人類文化的融合方式有關(guān)。根據(jù)人類和ResMem的被試結(jié)果，那些最令人難忘的畫作要么很幽默，要么很粗俗。舉個例子，得分最高的畫作之一描繪的是兩根長長的馬鈴薯被掛在繩子上搖晃，就像睪丸一樣。班布里奇團隊“注意到了這個有趣的地方”，即使神經(jīng)網(wǎng)絡(luò)無法告訴我們?yōu)槭裁础?/p>

福斯科在其名為“Memorable AI”的項目工作中注意到了同樣的情況，并稱“怪異性與可記憶性之間存在明顯相關(guān)性”。Adobe公司的高級研究科學家卓婭·別林斯基（Zoya Bylinskii）也得出了類似結(jié)論——她在2015年的一項關(guān)于人們對藝術(shù)作品的審美判斷的研究，使用了與芝加哥大學團隊類似的方法，別林斯基在給《連線》雜志的電郵中如此寫道：自然風景雖然常被認為是最美的，但卻不是最難忘的。“我們不是因為某個事物美麗而記住它”，“而是因為它與我們之前見過的全然不同”。

班布里奇從過往的研究中發(fā)現(xiàn)，大腦——特別是視覺傳導(dǎo)通路和內(nèi)側(cè)顳葉的部分——對易記圖像和易忘圖像有著不同的反應(yīng)，即便人們沒有進行記憶任務(wù)的時候也是如此。她認為，大腦能夠迅速計算哪些視覺輸入應(yīng)該優(yōu)先處理，哪些可以丟棄。然而，大腦（或人工神經(jīng)網(wǎng)絡(luò)）究竟是如何將這些經(jīng)驗與其他經(jīng)驗區(qū)分開來的，依然是個未解之謎。

- Luisa Jung -

尼德爾認為“ResMem肯定是一個黑盒子”。在之前的一項研究中，他試圖通過生成圖片，來最大限度激活ResMem的各個組件，目的在于弄清模型究竟在想什么（這有點像通過揮舞每個玩具，看看哪個最能讓寵物興奮，從而找出它們最喜歡的玩具）。結(jié)果令人費解：最吸引它的是物體碎片和彩虹組成的迷幻漩渦。“有一張圖片令我記憶猶新——它提取了人們臉部的下半部分，并把它變成分形圖案?！?/p>

班布里奇提到，雖然“有趣”的圖像可能更容易被記住，但藝術(shù)作品是否會給人留下深刻印象還受許多其他因素的影響。厭惡或恐懼等非常強烈的負面情緒會讓某段經(jīng)歷長時間留存在我們腦海中。在這項研究中，研究人員可能沒有看到這種特殊影響，因為具有這些特征的、真正怪誕或恐怖的畫作在芝加哥藝術(shù)學院這樣的博物館中并不常見。

大腦還傾向于優(yōu)先處理那些令人驚訝的、新奇的和不同尋常的事物。別林斯基寫道：“我們記住過去，以便更好地預(yù)測未來?！彼聹y，某些藝術(shù)作品之所以成為文化名作，是因為它們的與眾不同——無論是獨特的風格、不同尋常的主題，還是對人們固有期待的打破，“正因如此，它們才深深扎根在人們腦海中。”

- Rene Magritte -

為了探尋藝術(shù)作品究竟為何令人難以忘懷，戴維斯和班布里奇正在嘗試一種新方法——尋求藝術(shù)家的幫助。班布里奇的實驗室正面向藝術(shù)家們舉辦一場特殊的比賽：誰的作品最“難忘”/最“易忘”。參賽作品將在畫廊展出，而研究團隊將對觀眾進行記憶測試。最容易讓觀眾記?。ɑ蜻z忘）的作品將獲勝，并有望為藝術(shù)作品的流行提供一些線索。（有意參賽的美國本土藝術(shù)家均可于2024年1月1日前將作品提交到芝加哥。)

除了嘗試讓藝術(shù)家找出圖像令人難忘的原因之外，戴維斯還希望探尋可記憶性在藝術(shù)創(chuàng)作過程中是如何被塑造的。因此，藝術(shù)家必須提供至少5張繪制過程中的作品照片。戴維斯說：“任何一筆的添加都會改變作品的可記憶性，所以我們正在使用ResMem來跟蹤畫作的每一次變化對可記憶性的影響?！?/p>

別林斯基寫道，當我們了解人腦是如何安排信息處理的優(yōu)先順序時，“就為‘操縱’創(chuàng)造了機會，無論結(jié)果是好是壞?！盧esMem的版權(quán)歸芝加哥大學所有，因此企業(yè)無法將其用于更加吸引眼球的廣告制作?！斑@有助于我們晚上入睡?！卑嗖祭锲嬲f道。但福斯科已經(jīng)在使用他們的深度學習模型，來幫助客戶對廣告內(nèi)容進行微調(diào)，以提高點擊率和回憶率。福斯科還設(shè)想，教育工作者可以利用這門科學來制作更容易讓學生記住的幻燈片和信息圖表。

- Jeeeoook -

對于視覺藝術(shù)家來說，能預(yù)測一件藝術(shù)品對觀眾有多大吸引力、并賦能藝術(shù)家對作品進行微調(diào)以迎合觀眾的AI，聽起來令人生畏。戴維斯談到，人們可能擔心Dall-E等生成式AI工具會阻礙原本的創(chuàng)作過程或表達方式。戴維斯經(jīng)常被問及，是否會將這些發(fā)現(xiàn)應(yīng)用到自己的藝術(shù)創(chuàng)作中。他的回答是，會盡量避免讓自己的神經(jīng)科學洞見滲透到他的創(chuàng)作過程中。他將ResMem設(shè)想為策展人和藝術(shù)家可以用來完善作品呈現(xiàn)的工具，但不能取代他們自己的創(chuàng)作方向。

盡管對可記憶性的利用可能威脅到藝術(shù)家和所有娛樂消費人群，但Bylinskii認為，弄清究竟是什么讓某一圖像深入人心，（某種程度上）也能使人們免受操縱——“解決方案不應(yīng)是減少知識的創(chuàng)造，而是讓知識廣泛傳播，從而使人能夠意識到自己在何種情況下被知識操控了”。

作者：Celia Ford

譯者：群山回唱 | 校對：腰總

排版：阿不鯨 | 封面：Viktor Koen

原文：

https://www.wired.com/story/beauty-is-in-the-eye-of-the-beholder-but-memorability-may-be-universal/

閱讀原文