5月15日凌晨，谷歌召開(kāi)“ I/O 2024”，生成式AI成為本次大會(huì)的重點(diǎn)并發(fā)布了一系列產(chǎn)品和多款大模型。

其中，谷歌DeepMind發(fā)布了一款全新的AI 代理（Agent）產(chǎn)品Project Astra，可以像昨天OpenAI發(fā)布的GPT4o一樣，實(shí)現(xiàn)跨文本、音頻、視頻多模態(tài)實(shí)時(shí)推理。

例如，通過(guò)手機(jī)或谷歌眼鏡讓Astra解答數(shù)學(xué)題，解讀周圍環(huán)境等，這對(duì)于盲人、翻譯、學(xué)習(xí)、導(dǎo)游、日常辦公等領(lǐng)域幫助非常大。

Project Astra功能展示

和GPT4o一樣，Astra的多模態(tài)理解能力使其玩法非常多，這里「AIGC開(kāi)放社區(qū)」就選一些有代表性的案例為大家展示。

例如，通過(guò)手機(jī)的攝像頭讓Astra對(duì)所有聽(tīng)到、看到的東西進(jìn)行解讀?？梢渣c(diǎn)擊揚(yáng)聲器、畫筆、代碼讓其解釋用途和含義。

此外，Astra還可以與谷歌眼鏡一起配合使用，這也就是說(shuō)盲人戴上它在走路、看東西時(shí)獲得實(shí)時(shí)解讀功能。

不過(guò)Astra的語(yǔ)音情感輸出能力和數(shù)據(jù)響應(yīng)效率，似乎比GPT4o差了一些。

 

也可以讓Astra對(duì)一些草圖、物品進(jìn)行深度解讀和聯(lián)想。

Astra對(duì)提升搜索體驗(yàn)幫助也非常大，例如，通過(guò)視頻讓Astra解釋，為什么留聲機(jī)的指針沒(méi)有放在轉(zhuǎn)盤上，Astra會(huì)直接跳轉(zhuǎn)搜索頁(yè)面給出詳細(xì)的解決方案。

甚至當(dāng)你接到詐騙電話時(shí)，Astra都可以及時(shí)提醒你。所以，Astra更像是一位萬(wàn)能小管家可以做很多事情。
 
AI代理可以為我們做什么

其實(shí)，AI代理并非現(xiàn)階段才出現(xiàn)的，深度游戲玩家應(yīng)該知道20多年前一款外掛神器——按鍵精靈。

這便是最早的AI代理雛形，它可以通過(guò)用戶輸入的指令來(lái)執(zhí)行特定操作，例如，讓游戲人物只在特定場(chǎng)景打怪。不過(guò)使用方法比較繁瑣，需要一些編程基礎(chǔ)。

隨后按鍵精靈演變成RPA（機(jī)器人流程自動(dòng)化）從游戲場(chǎng)景擴(kuò)展至辦公領(lǐng)域，并在OCR、NLP、ML等多種AI加持下實(shí)現(xiàn)自動(dòng)化完成，在金融、日常辦公、數(shù)據(jù)搬運(yùn)等應(yīng)用非常廣泛。

而Astra、Project Astra在大模型加持下的AI代理屬于第三代，在使用方式、能力方面獲得巨大提升，為我們做的事情也更多。

健康管理與醫(yī)療咨詢：AI健康代理助手可以通過(guò)分析用戶輸入的癥狀、健康記錄和生活習(xí)慣，提供個(gè)性化的健康建議和早期疾病預(yù)警。

例如，一位患有糖尿病的人可以使用AI健康助手跟蹤血糖水平，獲得飲食和運(yùn)動(dòng)建議，甚至在血糖水平異常時(shí)獲得提醒和建議尋求醫(yī)療幫助。

客戶服務(wù)自動(dòng)化：AI代理可以集成在客服系統(tǒng)中，提供7*24小時(shí)無(wú)間斷服務(wù)。能夠理解和回應(yīng)用戶查詢，提供賬戶信息、解決常見(jiàn)問(wèn)題、處理交易等。

個(gè)性化學(xué)習(xí)輔導(dǎo)：AI學(xué)習(xí)代理可以根據(jù)學(xué)生的學(xué)習(xí)進(jìn)度、興趣和難點(diǎn)定制個(gè)性化學(xué)習(xí)計(jì)劃。

通過(guò)分析學(xué)生的互動(dòng)，識(shí)別其強(qiáng)項(xiàng)和弱點(diǎn)，然后調(diào)整教學(xué)內(nèi)容和難度，以適應(yīng)學(xué)生的學(xué)習(xí)速度，從而提高學(xué)習(xí)效率和成效。

目前，谷歌并沒(méi)有公布Project Astra具體的發(fā)布時(shí)間，仍處于開(kāi)發(fā)階段。估計(jì)很快會(huì)登錄到Android、iOS等平臺(tái)中使用。

可以預(yù)見(jiàn)，由OpenAI、谷歌掀起的全能AI代理將成為生成式AI領(lǐng)域一個(gè)新的熱門賽道。

同時(shí)為之前的智能RPA、AutoGPT等起到推波助瀾的作用擴(kuò)大認(rèn)知和市場(chǎng)范圍，極大培養(yǎng)了用戶的習(xí)慣一個(gè)全民AI代理時(shí)代已經(jīng)來(lái)臨。

本文素材來(lái)源谷歌官網(wǎng)，如有侵權(quán)請(qǐng)聯(lián)系刪除

END

繼續(xù)閱讀：

未經(jīng)允許不得轉(zhuǎn)載：RPA中國(guó) | RPA全球生態(tài) | 數(shù)字化勞動(dòng)力 | RPA新聞 | 推動(dòng)中國(guó)RPA生態(tài)發(fā)展 | 流 > 對(duì)標(biāo)GPT4o！谷歌發(fā)布Project Astra，全民AI代理時(shí)代來(lái)啦