1995
谷歌團(tuán)隊(duì)提出一個(gè)設(shè)想，用AI技術(shù)處理用戶照片及搜索引擎查詢信息，全面分析出用戶的生活是怎樣的，這個(gè)項(xiàng)目名叫“Project Ellmann”。
按照最初的設(shè)想，Project Ellmann會(huì)用LLM（比如Gemini）提取信息，從用戶的照片中找到特定模式，然后制作一個(gè)聊天機(jī)器人，讓它精準(zhǔn)回答問(wèn)題。谷歌宣稱Ellmann將會(huì)成為“個(gè)人生活故事講述者”。
聽(tīng)起來(lái)很有趣，不過(guò)谷歌到底是想將Ellmann功能植入谷歌Photos，還是放進(jìn)其它產(chǎn)品？目前還不得而知。谷歌Photos擁有10多億用戶，存儲(chǔ)了4萬(wàn)億張照片或者視頻。
目前谷歌正在利用AI技術(shù)優(yōu)化產(chǎn)品線，Ellmann只是利用方式之一。幾天前谷歌推出Gemini，在某些場(chǎng)合Gemini甚至已經(jīng)超越OpenAI GPT-4。
谷歌有意將Gemini授權(quán)給谷歌云（Google Cloud）用戶使用，用戶可以借助Gemini開(kāi)發(fā)自己想要的功能。Gemini最突出的優(yōu)勢(shì)在于“多模態(tài)”，也就是說(shuō)它可以理解文本、圖片、視頻、音頻等多種類型的信息。
在最近的一次內(nèi)部會(huì)議上，谷歌Photos部門一位高管展示了Project Ellman。內(nèi)部文檔顯示，谷歌團(tuán)隊(duì)認(rèn)為可以借助大語(yǔ)言模型以“鳥(niǎo)瞰”方式展示用戶在現(xiàn)實(shí)世界的生活故事。
通過(guò)傳記、之前的記錄、照片等資料，Ellman能夠深入理解情境。例如，通過(guò)分析一系列片段，Ellman可以知道各種信息的主題是不是大學(xué)生活。
在演示幻燈片中，有一張寫道：“如果不能以鳥(niǎo)瞰方式查看個(gè)人生活，我們就無(wú)法回答難題，也無(wú)法講好故事。”
另一張則說(shuō)：“我們會(huì)翻看你的照片，看看它的標(biāo)簽和地點(diǎn)是什么，然后判斷出它們是否屬于某一個(gè)有意義的時(shí)刻。當(dāng)我們?nèi)胬斫饽愕纳?，個(gè)人故事就會(huì)變得更清晰。”
谷歌團(tuán)隊(duì)還談到了Ellmann Chat。什么是Ellmann Chat？團(tuán)隊(duì)描述說(shuō)：“你不妨設(shè)想一下，當(dāng)你打開(kāi)它，它已經(jīng)知道與個(gè)人生活有關(guān)的一切，你會(huì)向它提什么問(wèn)題呢？”
例如，用戶問(wèn)Ellmann Chat一個(gè)問(wèn)題：“我有沒(méi)有養(yǎng)狗?！盇I回答說(shuō)主人有一只狗，還說(shuō)出了狗的名字，還說(shuō)家里有兩個(gè)人最喜歡和狗在一起，家人的名字叫什么。
另一個(gè)問(wèn)題則是主人想搬家，讓AI提供一些與現(xiàn)有居住環(huán)境相似的小鎮(zhèn)供選擇。這些問(wèn)題Ellmann都能回答。不只如此，Ellmann還知道用戶的飲食習(xí)慣是怎樣的。
比如，用戶想買什么東西，有什么興趣，有什么工作和旅行計(jì)劃，Ellmann都可以分析照片，找到答案。用戶喜歡訪問(wèn)什么網(wǎng)站，用什么App，Ellmann更是一清二楚。
谷歌新聞發(fā)言人透露：“谷歌Photos一直想用AI技術(shù)幫助用戶搜索照片和視頻，有了LLM，我們可以提供更實(shí)用的體驗(yàn)。Ellmann目前仍處在內(nèi)部早期探索階段，最終是否真的推出還需要時(shí)間確定。谷歌要確保Ellmann對(duì)用戶真的有用，還要考慮用戶的隱私和安全。”
有很多科技企業(yè)都想利用新技術(shù)為用戶創(chuàng)建更加個(gè)性化的個(gè)人記憶，Project Ellmann只是其中之一。
不管是谷歌Photos還是蘋果相冊(cè)，它們都在分析照片，從中找到規(guī)律，然后制作相冊(cè)。谷歌Photos可以自動(dòng)將相似照片集合在一起變成相冊(cè)，方便用戶查找。蘋果6月份曾說(shuō)，軟件升級(jí)之后可以識(shí)別相片中的人、狗或者貓，用戶只需要說(shuō)出人的名字，軟件就可以幫你查找他的照片。
聽(tīng)起來(lái)很美好，但谷歌和蘋果的技術(shù)仍不完美，有時(shí)也會(huì)犯錯(cuò)。2015年時(shí)蘋果谷歌AI曾將黑人識(shí)別為黑猩猩，鬧出笑話，即使到了今天，錯(cuò)誤仍然難以避免。
下載ECAD模型
