用AI重构手机交互 OPPO要打造会看_会听_会说_做得快的AI手机
SupergiantGames于周三为热门游戏《哈迪斯2》发布了首个名为“奥林匹斯”的重大更新。除了对游戏玩法进行更新和调整外,本次更新最大的亮点是新增了对苹果Mac设备的支持,允许搭载M1及后续芯片的Mac设备本地运行该游戏。
伴随着AI技术的快速发展,AI在手机上的应用也向端侧化、主动化、多模态演进。各手机厂商纷纷投入巨资打造更易用的AI手机。
2024 年 10 月 17 日, 2024 OPPO 开发者大会在杭州启幕。OPPO官宣 AI 新战略,并集中展示了各项AI新成果以及全新升级的ColorOS 15操作系统。
OPPO软件工程事业部总裁唐凯在会上表示:“ AIOS是AI手机的关键组成部分,我们认为AIOS会经历三个阶段:从 阶段的系统应用AI化(AI for System),到第二阶段的系统AI化(System for AI),再到第三阶段的AI即系统(AI as System)。”
自年初提出 AI 手机战略以来,OPPO 致力于成为 AI 手机的贡献者与普及者,目标是让前沿的 AI 技术从实验室走进用户生活,为用户打造最佳 AI 手机体验。而为达成这个目标,OPPO对交互范式,计算范式和开发范式进行了重构。
对此,OPPO AI中心产品总监张峻在发言中表示:“随着AI随着AI在模型、算力、数据、服务生态等领域的持续演进。Ai将和硬件 、系统架构、应用交互进行深度的融合,应用级的AI正在向系统级的AI演进。”她强调AI将重构手机的交互方式。AI可以把原来传统的图形交互、触控交互、自然语言交互融合在一起,并结合视觉的理解能力,任务的编排能力,打造更加直接一步到位的多模态交互体验。
在交互范式重构方面,OPPO 推出全新的 SenseNow 智慧框架,实现了 “直觉、简单、好用” 的交互体验。该框架集成自主研发的语音多级唤醒和个性化识别技术,语音唤醒和识别准确率达到 97% 以上。
同时,通过多模态理解让 AI 拥有看的能力,通过检索增强多模态理解技术实现了图文混合检索,可识别 1000 多种主体比如说景点、人物、动植物、美食等。以景点为例,OPPO采集了全国三a级以上超过16,000个景点超百万级的数据,来专项进行图搜增强的训练。因此可以对景点进行精准的识别,并且还能够提供跟它相关的背景信息,历史故事等内容。生成式语音合成框架使 AI 能模拟真人说话语气和节奏,支持 20 多种个性化音色。全新的智能助理小布支持超过 1800 项用机指令,用户可通过简单语音指令完成手机设置、应用等操作。
在计算范式重构方面,端云协同的大模型矩阵架构提升了计算效率。而OPPO 也在自主训练大模型方面不断积累,自研安第斯大模型在 SuperCLUE 榜单中安全、智能体和数学子榜上斩获 ,总榜取得国内第二的成绩。此外,OPPO还与国内众多大模型厂商深度合作,如与阿里云协作提升性能和效率。在端侧计算方面,与芯片厂商联合研发端侧 LoRA 架构,突破硬件资源瓶颈,实现多个大模型在端侧部署。同时推出 AI 私密计算云,采用端云协同的硬件级 TEE 可信计算技术,确保计算安全可信。
在开发范式重构方面,OPPO 推出手机行业首个智能体开发 并对全行业开放。该 提供低门槛、零代码的开发工具,帮助开发者快速构建和部署智能体应用。而通过与 云、火山引擎、支付宝等合作,提供丰富 API 和端云协同架构,支持智能体在不同场景 运行,降低 AI 开发技术门槛,加速从概念到产品落地过程。
全新 ColorOS 15是此次大会另一个引人瞩目的亮点,聚焦流畅、AI、设计、易用性等方面,带来了耳目一新的体验。
首先是流畅性大幅提升。这背后是系统从底层到用户层的 重构,并带来流畅双引擎。“极光引擎” 引入并行绘制框架,实现动画连贯丝滑;“潮汐引擎” 则通过芯片级性能优化,提升流畅与续航。
AI 交互的升级实现了诸多好用易用的新功能。比如:“一键问屏”功能就整合多个贯穿全系统的 AI 能力。它涵盖了:识屏问答、资讯问答、制定攻略、出行买票、一拍即问。小布助手可以理解屏幕内外内容,并根据识别的内容,快速提供准确的回答、建议,而且支持内容的连续追问,甚至可以发出指令,例如修图文件转换格式等。OPPO也特意在现场演示了这个功能,任意拍张照片,即可通过语音询问照片相关各种细节。此外,一键AI修图也很出彩,当你隔窗拍美景时,它可以AI去反光,超远距离拍摄时,可以AI增强像素,运动抓拍可以AI去拖影,AI 路人也无需圈选,一键即可 所有路人。
新系统在设计与易用性上也进行了优化。在设计上以易简设计哲学为基石,从自然光影中汲取灵感。围绕易用体验,新增“相册可逆化编辑”(照片美化不满意可一键恢复原片)、与iOS的类原生互传、实况照片Live Photo等功能,以及全新升级的流体云、自由窗口体系等功能,进一步提升了系统的易用性与便捷性。
ColorOS 15于10月17日开启内测,将首发搭载于OPPO Find X8与一加13新品,11月将陆续启动老机型正式版升级计划。
OPPO还在大会上宣布,开放云测服务、新机适配和隐私自动检测服务,降低应用开发调试成本;应用更新能力缩短更新链路。升级「OPPO 有数」服务,开放 OS 数据能力赋能开发者。此外,OPPO的智能体开发 也吸引了众多开发者,提供统一服务库、优化开发环境等,最快 3 天可完成一套服务的开发、接入和上架。
封面新闻记者且菲杭州报道
【如果您有新闻线索,欢迎向我们报料,一经采纳有费用酬谢。报料微信关注:ihxd ,报料QQ:3386405712】