智东西(公众号:zhidxcom)
作者 | 吴浪娜
编辑 | 漠影
智东(dong)西10月(yue)18日(ri)报(bao)道,OPPO昨天在(zai)杭州发(fa)布了(le)全新的(de)系(xi)统级AI与ColorOS 15,并在(zai)开发(fa)者生态共建等方面展开深入探索(suo)。
此次ColorOS 15搭载(zai)OPPO自研的双引擎(qing),实(shi)现多个(ge)动(dong)画的并行绘制响(xiang)应(ying),并通过智(zhi)能动(dong)态(tai)缓存和全栈式算(suan)法(fa)加速(su)器两项自研技术来保障芯片的资源供(gong)给能力,探索(suo)AI在交互(hu)、计算(suan)及生态(tai)方面的突破(po)。
OPPO软件工程事业部(bu)总裁唐凯在会上说道:“AIOS是AI手(shou)机的(de)(de)(de)(de)关(guan)键组成部(bu)分,我们(men)(men)认为(wei)AIOS会经历三个阶段:从第(di)一阶段的(de)(de)(de)(de)系统应(ying)用(yong)AI化(AI for System),到(dao)第(di)二(er)阶段的(de)(de)(de)(de)系统AI化(System for AI),再到(dao)第(di)三阶段的(de)(de)(de)(de)AI即(ji)系统(AI as System)。面向AI的(de)(de)(de)(de)新未来,我们(men)(men)将继续保持开放的(de)(de)(de)(de)合作(zuo)态度,与行(xing)业领先者密切协作(zuo),为(wei)用(yong)户打造最佳AI手(shou)机体验(yan)。”

ColorOS 15宣(xuan)布在10月17日开启内测(ce),并将(jiang)首发搭载(zai)于OPPO Find X8与一加13新品,11月将(jiang)陆续启动老机型(xing)正式版升级计划。
一、自研双引擎实现多个动画的并行绘制响应,流畅度提升 22%
在流畅性方(fang)面(mian),OPPO进行了大(da)量人因研究和技(ji)术(shu)突破,ColorOS 15上为解(jie)决多感(gan)官(guan)在合成(cheng)为感(gan)觉时产生的细微卡顿感(gan),从底层到用户层进行重构,保障用户的流畅体验。
ColorOS 15搭载(zai)了(le)OPPO自研(yan)的(de)(de)双引(yin)擎(qing),“极光引(yin)擎(qing)”和(he)“潮汐引(yin)擎(qing)”。作(zuo)为(wei)系统(tong)级(ji)渲染与绘制(zhi)(zhi)架构,极光引(yin)擎(qing)通过打造并(bing)行(xing)绘制(zhi)(zhi)框架,实现多(duo)个动(dong)画的(de)(de)并(bing)行(xing)绘制(zhi)(zhi)响应,上一个动(dong)画还未结束,系统(tong)便启动(dong)同步(bu)绘制(zhi)(zhi)两个画面窗口,最大程(cheng)度(du)上提(ti)升用户体(ti)验的(de)(de)流畅度(du)。

极光(guang)引(yin)擎还引(yin)入系统级柔性回(hui)弹微动(dong)(dong)效(xiao),使系统体(ti)(ti)验更符合真实世界的物理反馈。极光(guang)引(yin)擎将(jiang)系统级滑(hua)动(dong)(dong)曲(qu)线覆盖WebView,第三(san)方应(ying)用也能获(huo)得同样(yang)的滑(hua)动(dong)(dong)体(ti)(ti)验。

此外,OPPO联合中国科学院心理研究所,双方共同(tong)推出系统流畅的(de)五个零体验标准。ColorOS 15在20个应用两(liang)轮打开、关闭测试中,做(zuo)到(dao)0闪退、0闪跳、0掉帧、0时延和0断触。

潮汐(xi)引擎(qing)提供了(le)芯片级性能(neng)(neng)解决方案,通(tong)过OPPO自研的(de)(de)智(zhi)能(neng)(neng)动(dong)态缓存(cun)(cun)和(he)全(quan)栈式算(suan)法(fa)加速器两(liang)大(da)技(ji)术保障芯片的(de)(de)资源(yuan)(yuan)供给能(neng)(neng)力。芯片缓存(cun)(cun)是突(tu)破性能(neng)(neng)上线的(de)(de)关键,潮汐(xi)引擎(qing)深入芯片底层(ceng),改变芯片缓存(cun)(cun)的(de)(de)分配机制。它可以根据识别的(de)(de)用(yong)(yong)机场(chang)景智(zhi)能(neng)(neng)动(dong)态分配算(suan)力资源(yuan)(yuan),即使面(mian)对各种(zhong)复杂的(de)(de)用(yong)(yong)户场(chang)景,也能(neng)(neng)带(dai)来更(geng)好的(de)(de)性能(neng)(neng)供给和(he)功耗控制。
同时,潮汐引擎通过全栈式算(suan)(suan)法加速(su)器还提(ti)供了更高(gao)(gao)效(xiao)的(de)并(bing)行(xing)化计(ji)算(suan)(suan),对安卓软件库中通用的(de)算(suan)(suan)法进(jin)行(xing)加速(su),实现(xian)最(zui)高(gao)(gao)3倍的(de)算(suan)(suan)法效(xiao)率提(ti)升。通过智能(neng)动态(tai)缓存和并(bing)行(xing)计(ji)算(suan)(suan)架构,ColorOS 15带来(lai)了22%的(de)整(zheng)机流畅度提(ti)升与12分钟的(de)续航提(ti)升,在各类场景(jing)下(xia)均(jun)有能(neng)效(xiao)提(ti)升收益。
二、小布助手升级,实现一键问屏系统级AI交互
在OPPO多项AI自研技术(shu)的加(jia)持下(xia),ColorOS 15实现了(le)一(yi)键问屏系统级AI交互,整合多个贯(guan)穿全系统的AI能力。

ColorOS 15带来新升级的(de)小布助(zhu)手,凭借系统级AI能力,深(shen)入系统底层(ceng),串(chuan)联自有应(ying)用(yong)和第三方应(ying)用(yong),自然地(di)理解用(yong)户(hu)意图,并(bing)代替用(yong)户(hu)执行各(ge)种操作。
在交(jiao)互方式(shi)上(shang),小布助(zhu)手(shou)带(dai)来系(xi)统级交(jiao)互一键(jian)问屏,通过简单的语音对话和圈(quan)搜等方式(shi)带(dai)来AI一站式(shi)服务。小布助(zhu)手(shou)可以理解屏幕内外内容,并根据识别的内容,快速提(ti)供(gong)准确的回答(da)、建议,而且支(zhi)持内容的连续追问,还(hai)可以发(fa)出操作指(zhi)令,例如(ru)修图文件转(zhuan)换格(ge)式(shi)等,尽可能提(ti)升用户的操作效率。

在(zai)影像创作方(fang)面,ColorOS 15将(jiang)AI一(yi)(yi)键消除(chu)功(gong)能(neng)升(sheng)级为一(yi)(yi)键AI修图功(gong)能(neng),推(tui)出(chu)AI去反光、AI去拖(tuo)影及AI超(chao)清像素,并将(jiang)AI消除(chu)功(gong)能(neng)升(sheng)级成一(yi)(yi)键自动识(shi)别路人的方(fang)式。

在办公(gong)学习方面(mian),ColorOS 15在便签中融入系统级AI笔(bi)记助手,提供一(yi)键智能排版、AI润色(se)和续写(xie)等AI功(gong)能;推出一(yi)站式(shi)(shi)AI文(wen)档(dang)——OPPO文(wen)档(dang),支(zhi)持(chi)多个跨应(ying)用的(de)穿透搜索,并带来PDF、Word、PowerPoint及苹果(guo)iWork三件套等不同文(wen)档(dang)格式(shi)(shi)的(de)随心转换、AI笔(bi)记套件、万字(zi)文(wen)档(dang)5秒(miao)AI摘(zhai)要等AI功(gong)能。

围(wei)绕易用(yong)体验,ColorOS还新(xin)增了相册可逆化(hua)编辑、与(yu)iOS的类(lei)原(yuan)生互传(chuan)、实况照片Live Photo等功能,以及新(xin)升级了流体云、自由窗(chuang)口体系等功能,进一步提升了系统的易用(yong)性与(yu)便捷性。
三、推出SenseNow智慧框架,语音唤醒和识别准确率超97%
OPPO推出SenseNow智慧框架,追求“听得(de)(de)清、看得(de)(de)懂(dong)、说得(de)(de)好、做得(de)(de)快”的多模态直觉交互体验(yan)。SenseNow智慧框架集成OPPO自主研(yan)发(fa)的语音(yin)多级唤(huan)醒(xing)和个性化(hua)识别技术(shu),实现语音(yin)唤(huan)醒(xing)和识别的准确(que)率达(da)到97%以上。

多(duo)模(mo)(mo)态理(li)解让AI拥有看的(de)能力,是SenseNow智慧(hui)框架(jia)的(de)核(he)心,检(jian)(jian)索(suo)增(zeng)强多(duo)模(mo)(mo)态理(li)解技术的(de)使用(yong),让OPPO AI实现(xian)了图文混合(he)检(jian)(jian)索(suo),支持(chi)1000多(duo)种主体(ti)的(de)识别,涵盖(gai)景点、美(mei)食、人物(wu)等。
生(sheng)成式语(yu)音合成框架的(de)(de)使(shi)用(yong),让AI可以模拟真(zhen)人说话的(de)(de)语(yu)气和节奏,并支持超过20种(zhong)个性化音色,带来更自然的(de)(de)语(yu)音交互(hu)体验。
同(tong)时,SenseNow智慧框架还让(rang)OPPO AI可(ke)以(yi)融(rong)合语音(yin)、文(wen)本和(he)图(tu)片等不同(tong)类型(xing)的(de)信息源(yuan),理解用(yong)户的(de)复杂意图(tu),完成(cheng)跨应用(yong)的(de)无(wu)缝操作。小(xiao)布(bu)助(zhu)手将(jiang)支持超过1800项用(yong)机指令(ling)(ling),让(rang)用(yong)户只需(xu)要简单的(de)语音(yin)指令(ling)(ling),就可(ke)以(yi)完成(cheng)对应的(de)手机设置(zhi)或应用(yong)操作。

在端(duan)(duan)侧计(ji)算方面(mian),硬(ying)件资(zi)源的瓶颈制(zhi)约(yue)了端(duan)(duan)侧大模(mo)型的部署。OPPO与芯片厂商联合(he)研发了端(duan)(duan)侧LoRA架构(gou),以一(yi)个(ge)基(ji)座模(mo)型和多个(ge)动态加载小模(mo)型的全新架构(gou),大幅降(jiang)低(di)了手机内存的峰(feng)值占(zhan)用,实现了多个(ge)大模(mo)型在端(duan)(duan)侧部署时硬(ying)件资(zi)源瓶颈的突破。
端云(yun)协(xie)同的(de)多垂域大(da)模(mo)(mo)型(xing)矩阵,让OPPO AI拥有(you)针对用(yong)(yong)户的(de)不同场景提(ti)供更合(he)适的(de)专业(ye)大(da)模(mo)(mo)型(xing)服务(wu)的(de)能力。智能决策(ce)模(mo)(mo)型(xing)通过对用(yong)(yong)户提(ti)供的(de)信息进(jin)行多模(mo)(mo)态理解,并将其分(fen)流至(zhi)对应的(de)专家(jia)模(mo)(mo)型(xing)。例(li)如系统(tong)可以识别用(yong)(yong)户上传的(de)照(zhao)片是(shi)数学试卷还是(shi)人(ren)物照(zhao)片,并提(ti)供相(xiang)应的(de)解题或(huo)动态查询服务(wu),实现(xian)个(ge)性化(hua)调度。
OPPO为ColorOS 15引入全(quan)新的芯片级AI私(si)密计算云(yun),采用(yong)(yong)端云(yun)协(xie)同的硬件级TEE可(ke)信计算技术,确(que)保(bao)云(yun)侧与端侧的计算同样(yang)安(an)全(quan)可(ke)信,确(que)保(bao)用(yong)(yong)户隐私(si)数据在云(yun)端可(ke)用(yong)(yong)不可(ke)见,放心使用(yong)(yong)云(yun)上AI服务。

为推动AI生态的(de)创新与(yu)开放,OPPO推出了手机(ji)行业(ye)(ye)的(de)首(shou)个智(zhi)能体(ti)开发平(ping)台,并正式(shi)对全(quan)行业(ye)(ye)开放。该平(ping)台提供低门槛、零代码的(de)开发工具,帮助开发者快(kuai)速构建和部署智(zhi)能体(ti)应用。

通(tong)过与(yu)百度(du)云、火(huo)山引擎(qing)、支付(fu)宝等合作(zuo),OPPO为开(kai)(kai)发者提(ti)供丰(feng)富的(de)API和端云协同架构,支持智能体在不同场景(jing)中的(de)高效(xiao)运行。该平(ping)台(tai)不仅降低了AI开(kai)(kai)发的(de)技术门槛(jian),还加速了从概念到产品落(luo)地的(de)过程,推动AI技术的(de)普及与(yu)创新。
为了方便(bian)开(kai)(kai)(kai)发者(zhe)更高效地接入OPPO智慧(hui)服务(wu)生态(tai)并实现服务(wu)的(de)(de)(de)精准触达,OPPO提供了全链路的(de)(de)(de)解决(jue)方案,包括统一服务(wu)库(ku)、优(you)化(hua)开(kai)(kai)(kai)发环(huan)境、升级智慧(hui)服务(wu)引(yin)擎等。其中统一的(de)(de)(de)服务(wu)库(ku)有效帮助开(kai)(kai)(kai)发者(zhe)实现了一次开(kai)(kai)(kai)发全场景(jing)覆盖;而通过IDE整合(he)开(kai)(kai)(kai)发环(huan)境,平台开(kai)(kai)(kai)发者(zhe)的(de)(de)(de)开(kai)(kai)(kai)发效率得(de)到较大(da)提升,最快(kuai)3天便(bian)能(neng)够完成(cheng)一套服务(wu)的(de)(de)(de)开(kai)(kai)(kai)发、接入和(he)上架。
值得一(yi)提的是,OPPO推出了意(yi)图框架,使智慧服(fu)务引擎更智能和(he)精准。意(yi)图框架通(tong)过终端(duan)数据与开发者(zhe)的意(yi)图共享,对用户的实时意(yi)图进行(xing)判断和(he)推理,使得服(fu)务能够更精准地(di)触(chu)达用户,当前(qian)意(yi)图框架已支持125个小类场景(jing)和(he)近200个细分意(yi)图。
结语:用系统级AI从底层到交互打造新ColorOS
在AI手机(ji)时代,用(yong)(yong)户的(de)交(jiao)互方式正在从(cong)单一的(de)屏幕(mu)点击,向语音、图文等多模(mo)(mo)态(tai)转变,原本(ben)依(yi)赖(lai)于App的(de)服务也逐渐被解构并(bing)以原子化的(de)形式提供给用(yong)(yong)户。ColorOS 15将为(wei)用(yong)(yong)户带来原子化、多模(mo)(mo)态(tai)和智(zhi)能化的(de)服务生态(tai)。
ColorOS 15的发(fa)布展示了OPPO在(zai)手机系统研发(fa)上(shang)的新进(jin)展。其自研双引(yin)擎在(zai)流畅度上(shang)有所提(ti)升,多动画并(bing)行绘制(zhi)响应以及对芯片资源供给的保障,让用户体(ti)验得以改善且(qie)续(xu)航时间有一定增加。
而(er)小布助手的(de)(de)(de)(de)升级帮助实现(xian)了更深入的(de)(de)(de)(de)系统级AI交互(hu),在影像创作、办(ban)公学习(xi)等多个领域为用户带来操作上的(de)(de)(de)(de)便(bian)利。SenseNow智慧框架的(de)(de)(de)(de)推出则在交互(hu)体验和(he)多模态(tai)理解方(fang)面有所(suo)突破,并且在端侧计(ji)算和(he)隐私安全上做出了创新。
此外,OPPO积(ji)极推动开(kai)发者生(sheng)态建(jian)设,智(zhi)能体(ti)开(kai)发平台、全链路(lu)解决方案和意图框架等举措,为行(xing)业发展提供(gong)了助力。