伴隨著AI技術的快速發展,AI在手機上的應用也向端側化、主動化、多模態演進。各手機廠商紛紛投入巨資打造更易用的AI手機。
2024 年 10 月 17 日, 2024 OPPO 開發者大會在杭州啟幕。OPPO官宣 AI 新戰略,并集中展示了各項AI新成果以及全新升級的ColorOS 15操作系統。
OPPO軟件工程事業部總裁唐凱在會上表示:“ AIOS是AI手機的關鍵組成部分,我們認為AIOS會經歷三個階段:從第一階段的系統應用AI化(AI for System),到第二階段的系統AI化(System for AI),再到第三階段的AI即系統(AI as System)。”
AI將重構手機的交互方式
自年初提出 AI 手機戰略以來,OPPO 致力于成為 AI 手機的貢獻者與普及者,目標是讓前沿的 AI 技術從實驗室走進用戶生活,為用戶打造最佳 AI 手機體驗。而為達成這個目標,OPPO對交互范式,計算范式和開發范式進行了重構。
對此,OPPO AI中心產品總監張峻在發言中表示:“隨著AI隨著AI在模型、算力、數據、服務生態等領域的持續演進。Ai將和硬件平臺、系統架構、應用交互進行深度的融合,應用級的AI正在向系統級的AI演進。”她強調AI將重構手機的交互方式。AI可以把原來傳統的圖形交互、觸控交互、自然語言交互融合在一起,并結合視覺的理解能力,任務的編排能力,打造更加直接一步到位的多模態交互體驗。
在交互范式重構方面,OPPO 推出全新的 SenseNow 智慧框架,實現了 “直覺、簡單、好用” 的交互體驗。該框架集成自主研發的語音多級喚醒和個性化識別技術,語音喚醒和識別準確率達到 97% 以上。
同時,通過多模態理解讓 AI 擁有看的能力,通過檢索增強多模態理解技術實現了圖文混合檢索,可識別 1000 多種主體比如說景點、人物、動植物、美食等。以景點為例,OPPO采集了全國三a級以上超過16,000個景點超百萬級的數據,來專項進行圖搜增強的訓練。因此可以對景點進行精準的識別,并且還能夠提供跟它相關的背景信息,歷史故事等內容。生成式語音合成框架使 AI 能模擬真人說話語氣和節奏,支持 20 多種個性化音色。全新的智能助理小布支持超過 1800 項用機指令,用戶可通過簡單語音指令完成手機設置、應用等操作。
在計算范式重構方面,端云協同的大模型矩陣架構提升了計算效率。而OPPO 也在自主訓練大模型方面不斷積累,自研安第斯大模型在 SuperCLUE 榜單中安全、智能體和數學子榜上斬獲第一,總榜取得國內第二的成績。此外,OPPO還與國內眾多大模型廠商深度合作,如與阿里云協作提升性能和效率。在端側計算方面,與芯片廠商聯合研發端側 LoRA 架構,突破硬件資源瓶頸,實現多個大模型在端側部署。同時推出 AI 私密計算云,采用端云協同的硬件級 TEE 可信計算技術,確保計算安全可信。
在開發范式重構方面,OPPO 推出手機行業首個智能體開發平臺并對全行業開放。該平臺提供低門檻、零代碼的開發工具,幫助開發者快速構建和部署智能體應用。而通過與百度云、火山引擎、支付寶等合作,提供豐富 API 和端云協同架構,支持智能體在不同場景高效運行,降低 AI 開發技術門檻,加速從概念到產品落地過程。
ColorOS 15 與 AI 的融合
全新 ColorOS 15是此次大會另一個引人矚目的亮點,聚焦流暢、AI、設計、易用性等方面,帶來了耳目一新的體驗。
首先是流暢性大幅提升。這背后是系統從底層到用戶層的全面重構,并帶來流暢雙引擎。“極光引擎” 引入并行繪制框架,實現動畫連貫絲滑;“潮汐引擎” 則通過芯片級性能優化,提升流暢與續航。
AI 交互的升級實現了諸多好用易用的新功能。比如:“一鍵問屏”功能就整合多個貫穿全系統的 AI 能力。它涵蓋了:識屏問答、資訊問答、制定攻略、出行買票、一拍即問。小布助手可以理解屏幕內外內容,并根據識別的內容,快速提供準確的回答、建議,而且支持內容的連續追問,甚至可以發出指令,例如修圖文件轉換格式等。OPPO也特意在現場演示了這個功能,任意拍張照片,即可通過語音詢問照片相關各種細節。此外,一鍵AI修圖也很出彩,當你隔窗拍美景時,它可以AI去反光,超遠距離拍攝時,可以AI增強像素,運動抓拍可以AI去拖影,AI消除路人也無需圈選,一鍵即可消除所有路人。
新系統在設計與易用性上也進行了優化。在設計上以易簡設計哲學為基石,從自然光影中汲取靈感。圍繞易用體驗,新增“相冊可逆化編輯”(照片美化不滿意可一鍵恢復原片)、與iOS的類原生互傳、實況照片Live Photo等功能,以及全新升級的流體云、自由窗口體系等功能,進一步提升了系統的易用性與便捷性。
ColorOS 15于10月17日開啟內測,將首發搭載于OPPO Find X8與一加13新品,11月將陸續啟動老機型正式版升級計劃。
OPPO還在大會上宣布,開放云測服務、新機適配和隱私自動檢測服務,降低應用開發調試成本;應用更新能力縮短更新鏈路。升級「OPPO 有數」服務,開放 OS 數據能力賦能開發者。此外,OPPO的智能體開發平臺也吸引了眾多開發者,提供統一服務庫、優化開發環境等,最快 3 天可完成一套服務的開發、接入和上架。