5月14日凌晨，OpenAI在官網(wǎng)正式發(fā)布了新旗艦?zāi)Ｐ虶PT-4o，可跨視頻、音頻、文本進行實時推理，全球生成式AI領(lǐng)域再次迎來歷史性時刻。

OpenAI通過GPT-4o打造的語音版ChatGPT助手，可以與用戶跨音頻、視頻進行交流，例如，讓GPT-4o進行實時翻譯、唱歌、做數(shù)學題、講笑話等。簡單點說吧，以后家教、翻譯、秘書的飯碗都不保了。

2013年曾獲得奧斯卡最佳原創(chuàng)劇本的電影《Her》，為我們呈現(xiàn)了一場人與AI的“戀情”，Her的無所不能展現(xiàn)出了AI強大和恐怖的一面 。

11年后，GPT-4o將這部電影變成了現(xiàn)實，人人都可以擁有一個Her。

GPT-4o功能展示

OpenAI對GPT-4o的功能進行了大量展示，這里「AIGC開放社區(qū)」就選幾個有代表性的吧。例如，通過手機與GPT-4o視頻，讓其解讀一下你的想法。

首先，OpenAI的員工拿著手機拍攝了周圍的場景，很快GPT-4o便給出周圍的環(huán)境描述。接著員工讓GPT-4o猜測他今天要做什么的時候，它說可能會與OpenAI有關(guān)，開一個發(fā)布會之類的。

當員工說出這個發(fā)布會與“你”有關(guān)時，它的回答有點讓人覺得恐怖，居然會像人一樣表現(xiàn)出驚訝和停頓，這是以往任何語音助手都不具備的技術(shù)特征。

OpenAI總裁兼聯(lián)合創(chuàng)始人Greg Brockman讓兩個GPT-4o語音助手互相對話并唱歌。

 
一位父親希望GPT-4o可以輔導他的兒子做一道很難得數(shù)學題。它沒有像以往的ChatGPT一下子把所有答案都給出來，而是像家教一樣，一句一句的用引導的方式告訴他應(yīng)該如何解答這道題。

當「AIGC開放社區(qū)」看到這里時也為那些輔導老師捏了一把汗，估計在進化幾次連家教的飯碗也不保了。

 
和GPT-4o相處久了，應(yīng)該向它介紹點朋友吧。這不OpenAI展示了GPT-4o社牛的一面，直接解讀了一條寵物狗。

當你想與法國人、塞爾維亞人、匈牙利人進行對話時怎么辦？只能用翻譯軟件吧，但是那種傳統(tǒng)的太慢了不太適合交流。通過GPT-4o可以做到實時翻譯了，當你說完一句話時，它已經(jīng)幫你翻譯好了并且是語音輸出的。
怎么樣，看完這幾個案例對GPT-4o有何感受，是不是和電影中的Her幾乎差不多了？更驚喜的是OpenAI宣布免費開放使用，即便你不是付費用戶也沒問題。

GPT-4o測試數(shù)據(jù)

GPT-4o是一個多模態(tài)模型，可以在一個神經(jīng)網(wǎng)絡(luò)中輸入和輸出文本、視頻、音頻3種數(shù)據(jù)格式。

根據(jù)OpenAI給出的官網(wǎng)評測顯示，GPT-4o的語音響應(yīng)可以短至232毫秒，平均響應(yīng)為320 毫秒。GPT-4o的英語文本和代碼能力和 GPT-4 Turbo 的性能差不多。

GPT-4o在MMLU的評測中創(chuàng)下了88.7% 的新高分，超過了Claude 3 Opus、Gemini Pro 1.5、Gemini Ultra 1.0等目前市面上著名大模型。

GPT-4o的音頻ASR性能比 Whisper-v3 顯著提高了對所有語言的語音識別能力，特別是對于那些非常稀少的小語種，并且音頻的翻譯能力超過了谷歌的Gemini。

目前，GPT-4o的文本和圖像功能已經(jīng)在ChatGPT中開放使用，免費注冊用戶也可以體驗該功能。

開發(fā)人員通過API可以訪問GPT-4o 的文本和視覺功能。與GPT-4 Turbo相比，GPT-4o 速度提高了2倍價格低了50%，并且極大降低了tokens限制。

未來幾周內(nèi)，OpenAI會在ChatGPT Plus中推出新版語音模式GPT-4o的alpha版。讓我們期待一下更強的Her出現(xiàn)吧。

本文素材來源OpenAI官網(wǎng)，如有侵權(quán)請聯(lián)系刪除

END

繼續(xù)閱讀：

未經(jīng)允許不得轉(zhuǎn)載：RPA中國 | RPA全球生態(tài) | 數(shù)字化勞動力 | RPA新聞 | 推動中國RPA生態(tài)發(fā)展 | 流 > 重磅！OpenAI發(fā)布GPT-4o，非常驚艷語音版ChatGPT！