ChatGPT能視頻聊天了!OpenAI深夜上新:一鍵共享屏幕、召喚“聖誕老人”

智東西作者 雲鵬編輯 心緣

智東西12月13日報道,今天凌晨,OpenAI又給ChatGPT的高級語音模式發佈了全新視覺功能——實時視頻和屏幕共享。沒錯,你可以直接跟ChatGPT打視頻電話了,還可以分享自己的手機屏幕讓ChatGPT幫你解決各種棘手問題。

新增的聖誕老人語音模式也是聖誕氛圍感拉滿:

//oss.zhidx.com/uploads/2024/12/675b329965658_675b3299610c4_675b329961092_聖誕老人.mp4

視頻可以在高級語音模式中打開,在視頻通話過程中,現場4個嘉賓分別做了自我介紹,而ChatGPT可以記住每個人的名字以及他們對應的樣貌特點。

比如ChatGPT可以迅速回答出戴着馴鹿角的是誰,或者戴着聖誕老人帽子的人是誰,這種“實時視覺上下文”能力還是比較驚豔的。

整個視頻通話溝通的過程還是相當流暢的,工作人員介紹,這一功能背後是原生多模態大模型GPT-4o。

後續高級語音功能的對話都會有更自然的對話節奏、更豐富的情感和50多種語言的支持。

除了普通聊天,ChatGPT還可以一邊視頻一邊教你怎麼泡咖啡,通過攝像頭,它可以識別出面前的物體,並進行指導。

比如第一步要做什麼、第二步要做什麼,什麼時候拿起杯子倒水,以及每個步驟是在做什麼、有什麼效果、有哪些步驟可以做得更好。

另一個新功能是屏幕共享,這個功能也是在高級語音模式中開啓,開啓後,ChatGPT會看到我們屏幕上正在顯示的內容。

能做什麼?比如當你收到一個消息不知道該怎麼回覆,就可以讓ChatGPT幫你想想對策,它可以識別到你正在使用消息App並分析對方發來的信息,然後給出一個合理的回覆。

最後OpenAI還帶來了一個彩蛋,就是在ChatGPT的對話中加入了“聖誕老人模式”,你可以問聖誕老人各種問題,比如北極生活情況、精靈們在做什麼、如何留一個漂亮的大鬍子,甚至是“你最喜歡的馴鹿是哪一隻?”這樣的刁鑽問題。

//oss.zhidx.com/uploads/2024/12/675b329c2ec53_675b329c2a2a6_675b329c2a284_聖誕老人2.mp4

值得一提的是,在聊天過程中你可以隨時打開視頻模式,讓“聖誕老人”看到攝像頭所記錄的內容並進行相關互動,整個過程是比較流暢的。

視頻和共享屏幕新功能都會馬上在新的ChatGPT App中推出,不過只有Plus和Pro版用戶可以使用。聖誕老人語音模式在支持ChatGPT語音的地方都可以用,並且是免費的。