OpenAI近日宣布,其ChatGPT移動(dòng)應(yīng)用將新增一項(xiàng)高級(jí)功能——屏幕與實(shí)時(shí)視頻共享,旨在提升用戶聊天體驗(yàn),讓溝通更為直觀與高效。這項(xiàng)功能的推出,意味著用戶無(wú)需再通過(guò)上傳照片或文字描述來(lái)分享所見(jiàn)所感,直接利用手機(jī)攝像頭即可與ChatGPT進(jìn)行視覺(jué)交流。
屏幕和視頻共享功能在提升聊天便捷性的同時(shí),也引發(fā)了對(duì)于個(gè)人隱私安全的關(guān)注。畢竟,這賦予了OpenAI更多訪問(wèn)用戶敏感信息的權(quán)限。不過(guò),OpenAI強(qiáng)調(diào),他們將在保障用戶隱私的前提下,提供這一創(chuàng)新服務(wù)。
據(jù)悉,用戶只需在ChatGPT聊天欄中點(diǎn)擊語(yǔ)音圖標(biāo),即可進(jìn)入高級(jí)語(yǔ)音模式,進(jìn)而開啟屏幕和視頻共享功能。該功能原本計(jì)劃在GPT-4o發(fā)布時(shí)同步推出,但當(dāng)時(shí)僅提供了音頻模式。如今,隨著技術(shù)的不斷成熟,用戶終于能夠利用手機(jī)攝像頭與ChatGPT進(jìn)行視覺(jué)互動(dòng),讓AI模型“親眼”見(jiàn)證用戶的所見(jiàn)所聞。
在OpenAI的直播演示中,首席產(chǎn)品官Kevin Weil與團(tuán)隊(duì)成員展示了ChatGPT如何協(xié)助制作手沖咖啡。通過(guò)將手機(jī)攝像頭對(duì)準(zhǔn)咖啡機(jī),ChatGPT不僅理解了咖啡機(jī)的操作原理,還成功指導(dǎo)團(tuán)隊(duì)完成了咖啡的沖泡過(guò)程。團(tuán)隊(duì)還演示了ChatGPT如何通過(guò)理解手機(jī)上的公開消息來(lái)支持屏幕共享功能,其中Weil佩戴圣誕老人胡須的畫面更是增添了不少趣味性。
OpenAI表示,這項(xiàng)功能將率先在大多數(shù)國(guó)家向ChatGPT Plus、Pro以及Team用戶開放。對(duì)于Enterprise和Edu用戶而言,他們則將在明年1月開始體驗(yàn)這一新功能。歐盟、瑞士、冰島、挪威和列支敦士登等地區(qū)的ChatGPT Plus和Pro用戶也將很快迎來(lái)這一更新。
在OpenAI宣布這一消息之前,谷歌已經(jīng)展示了其Astra項(xiàng)目的進(jìn)展。Astra是一款實(shí)驗(yàn)性的人工智能助手,通過(guò)安卓應(yīng)用程序或原型眼鏡來(lái)記錄人類所看到的世界。而谷歌新推出的Gemini 2.0則進(jìn)一步升級(jí)了視覺(jué)和音頻處理能力,并具備了更多代理功能,能夠代表用戶執(zhí)行多步驟任務(wù)。目前,Gemini 2.0的代理功能以三個(gè)不同名稱存在:通用AI助手項(xiàng)目Astra、特定AI任務(wù)項(xiàng)目Mariner以及開發(fā)人員項(xiàng)目Jules。