6月10日消息,蘋果WWDC 24(全球開發者大會)將于明日凌晨1點揭幕。雖然蘋果官方發布的公告不多,但它的曝光信息卻已經鋪天蓋地。Siri史詩級融入AI、iOS 18諸多AI新功能、與OpenAI的合作呼之欲出,蘋果AI的各種動作已經成為科技圈最熱的話題之一。
WWDC 24大部分活動以線上形式進行,但會在6月11日的主題演講日于Apple Park(蘋果飛船總部大樓)為特邀嘉賓舉辦一場線下特別活動。智東西受邀前往蘋果總部,將在第一時間為你帶來WWDC深度報道,期待11日凌晨與你一同見證蘋果的“AI奇跡”。
從往期大會內容來看,WWDC一直以軟件為中心,可以說是一場萬眾期待的“軟件盛會”。
蘋果屆時將發布iOS 18,這可能成為iOS有史以來最具顛覆性的更新,而更新內容聚焦于新的AI功能和戰略,將占蘋果WWDC主題演講的一半時長。
據知情人士透露,蘋果的新AI系統將被稱為Apple Intelligence,它將出現在iPhone,iPad和Mac操作系統的新版本上。
此外,蘋果Vision Pro即將迎來第一次重大軟件更新——visionOS 2要來了。蘋果所有其他平臺的操作系統的新版本,包括iPadOS 18、watchOS 11、macOS 15、tvOS 18也將如期而至。
至于硬件方面,在去年的WWDC上,意義重大的Vision Pro首次亮相。但截至目前,WWDC 24沒有任何關于新硬件產品發布的消息。
據彭博社首席記者馬克·古爾曼(Mark Gurman)報道,蘋果不打算在WWDC 24上宣布任何新的硬件產品,重點將完全放在即將到來的軟件更新上。
下文將根據外媒爆料的信息,梳理WWDC 24可能出現的軟件更新內容,尤其是新的AI功能,包括:
整合ChatGPT的Siri
以AI為重點的iOS 18
iPadOS 18
macOS 15
visionOS 2
接下來,本文將帶你深入這5大方面的數十個重磅AI升級,提前看看蘋果AI大招的“前菜”。
一、Siri:整合ChatGPT,應用智能交互,多指令串聯
據彭博社6月5日的報道,蘋果預計很快宣布與OpenAI達成協議,將OpenAI的ChatGPT集成到iPhone的操作系統中,提供生成式AI服務。
蘋果曾經率先入局,于2011年推出Siri,搶先進入語音交互和AI領域,但很快就被眾多競爭對手所趕超,兩年前生成式AI聊天機器人再次讓蘋果公司措手不及。但如今,Siri或許會成為蘋果重新布局生成式AI的關鍵一招。
所以,蘋果WWDC 24的“重頭戲”,毫無疑問會是注入生成式AI后“浴火重生”的Siri。
蘋果的首要任務,是借助AI讓Siri更加智能,解決現有的種種問題:生硬的回復、不理解用戶想法,以及“我在網絡上找到這個”回應等。
基于現有信息和線索,不少外國媒體猜測,iOS 18中新版Siri或許擁有以下新AI功能:
更智能地了解用戶希望Siri執行的操作
口頭回答問題,而不是顯示網絡鏈接(帶有ChatGPT免責聲明)
了解用戶的聯系人、約會、位置等,以便做出更智能的響應
能夠總結通知、消息和冗長文檔的所有內容
能夠與應用進行交互。例如“將這個備忘錄移至我的新主頁文件夾”
將多條指令串聯在一起。例如“將這張照片裁剪成正方形并將其發送給Sam”
據知情人士透露,Siri用戶將首次能夠使用語音精確控制蘋果自家應用中的各個功能和操作。未來,蘋果會逐漸將其擴展到第三方應用,并允許用戶將多個指令串聯到一個請求中。
將指令串在一起的新功能,有可能解決Siri控制HomeKit設備的最大挫敗感之一,目前用戶沒有辦法實現“嘿Siri,關掉客廳燈并運行車庫工作模式”的類似指令。
本質上,蘋果是在借助生成式AI重建Siri,主要由大型語言模型(LLM)提供支持,很可能是蘋果自己的LLM和OpenAI的ChatGPT技術的某種組合。
不過,鑒于Siri改造任務規模之巨大,預計最早在明年才會全面推出,作為iOS 18后續更新的一部分。
二、iOS 18:多個內置應用更新、AI照片編輯、自定義表情符號
iOS 18預計將包括多個內置應用的更新,包括備忘錄、郵件、照片、Music和健身等。比如,照片將集成新的AI編輯功能,Music將獲得AI自動生成的播放列表,日歷將更好地集成提醒等。
另外,蘋果AI新功能的一個重要部分是摘要功能。蘋果公司正計劃在 Safari 瀏覽器中添加一項功能,使用戶能夠快速回顧文章和網頁內容,總結會議記錄、短信和電子郵件。蘋果還計劃推出一項智能回顧功能,用于匯總用戶錯過的通知和消息。
值得注意的是,iOS 18中比較基礎的AI任務將由設備本身處理,而更高級的功能則通過云計算來實現,且有專門AI算法自動判斷特定任務的處理方法。
下面重點梳理iOS 18可能出現的新AI功能。
AI照片編輯功能
目前,媒體關于AI照片編輯功能方面的爆料相當籠統,但也有一些具體的功能描述,比如“一項新的清理功能,允許用戶通過使用生成式AI軟件從圖像中刪除對象”,即AI驅動的物體移除,去除照片中不需要的人和物體。
實際上,蘋果一直致力于研究如何基于文本指令編輯照片,前幾個月剛發布了名為“MGIE”的新型開源AI模型,可以根據自然語言指令編輯圖像。
意思就是說,用戶只需要告訴設備想要實現什么效果即可。例如,用戶可以簡單地說“讓天空更藍”,MGIE會將其解釋為“識別并選擇天空,然后將該區域的飽和度提高20%”。
雖然暫時還不知道MGIE的功能有多少會被整合到iOS 18中,但其可以作為AI照片編輯功能的預期。蘋果的MGIE模型的功能大概有:
裁剪、調整大小、旋轉、翻轉
添加過濾器
識別和編輯特定的照片元素,如眼睛、頭發和衣服
在蘋果MGIE模型的論文和演示中,指令輸入使用了鍵入文本。但最終在iOS 18上的效果,似乎更有可能是通過Siri指令,例如“嘿Siri,移除右邊女人后面的柱子”。
AI自定義表情符號
彭博社報道稱,蘋果將使用生成式AI來允許用戶創建自定義表情符號。
蘋果正在開發相關軟件,可以根據用戶發短信的內容,即時創建自定義表情符號,也可能是會在用戶點擊表情符號菜單時,自動建議用戶自定義表情符號。
更智能的Spotlight搜索
有媒體報道稱,蘋果正在考慮使用AI來實現更智能的Spotlight搜索,能夠深入挖掘應用內信息。例如,可能實現如下搜索:
“給我看看我做的所有關于家居裝修的筆記和圖紙”
“給我看看我所有的奶酪食譜”
其他可能的AI功能
上述三項新AI功能,即照片編輯功能、自定義表情符號、智能Spotlight搜索,出現在iOS 18中的可能性極大。除此之外,蘋果在iOS 18上還有其他媒體爆料的正在開發的新AI功能:
語音備忘錄自動轉錄錄音
郵件自動分類傳入郵件
AI驅動的健康和健身教練
AI增強的日記
對錯過通知和消息的智能回顧
對電子郵件和消息的建議回復
在Pages文稿中進行AI輔助寫作
在Keynote講演中創建AI輔助幻燈片
在Xcode中為開發人員編寫AI代碼
在 Safari中快速回顧文章和網頁,總結會議筆記、短信和電子郵件
根據用戶的輸入(例如心情)自動生成的蘋果Music播放列表