wordpress 功能插件,站长工具seo查询5g5g,网站服务器怎么配置,广东省建设厅网站某某领导问到我#xff0c;AI手机这个产业发展如何#xff1f;对于#xff0c;地方科技园区#xff0c;应该如何发展相关产业#xff1f;我一时还真说不上来#xff0c;于是#xff0c;查了一下资料#xff0c;大概应对了一下。
一#xff1a;AI手机的定义 首先… 某某领导问到我AI手机这个产业发展如何对于地方科技园区应该如何发展相关产业我一时还真说不上来于是查了一下资料大概应对了一下。
一AI手机的定义 首先AI手机是最近两年的说法它的出现应该以三星手机的发布为起点 三星会重点宣传 Galaxy S24 系列的多语言实时翻译功能。这一功能就来自谷歌提供的 Gemini Ultra 模型。 去年三星手机发布会第一次宣布AI手机。实际上仅仅是接了一下公网大模型实时翻译了一下通话。 苹果在2024.06的开发者大会上宣布GPT-4o 被集成到了 iOS 18 中用于改善Siri的功能。 苹果作为手机第一品牌在AI手机上反应较慢最近才加入首先肯定是要改造那个智障Siri我看了一下目前其实已经可以配置使用但需要GPT4o API这玩意儿我可用不起太贵了。 所以AI 手机的第一个定义来了 AI 手机定义一搭载了AI应用的手机。 注意如果AI应用的服务方是公网服务那手机端可能啥都不用改。 如果AI手机就是这样那基本上的所有手机都能叫AI手机无非接入个云端大模型把原有APP改造一下显得更智能了。这和之前的智能手真没啥不一样。显然事情并没有那么简单。 我们来看一下之前智能手机想完成但没有完成的任务 场景一小爱同学XXXXXX。这是智能手机的语音助手需要有唤起词很傻。每次在车里要喊小德小德我觉得我是最傻的。还有进入酒店房间要唤醒小爱同学。 所以合理的方式是让设备方自动识别知道我在发起命令了比如 气息识别——只需要将手机话筒放在嘴边就可以自动触发与手机的对话和指令。 场景二手机游戏RPG主角的移动需要触屏滑动并不方便。为什么不能手势或者眼的视线来完成移动。所以有如下方法 眼动跟踪——可以实现30公分内高精度的眼动捕捉根据眼动追踪可以智能完成移动。 场景三手机有androidIOS鸿蒙这些系统间的数据共享工作协同仍有很大障碍。而手机与平板电脑各种物联网设备的协同也是困难。 目前并没有好的解决方案。 场景四更多的情况人在使用手机时有些行为实际是可以预知的人的情绪是可以判定的人的自然语言需要更好的识别通过摄像头的动作最好能作为指令等等…… 按照 上面的场景我们可以总结一下 我们的手机需要能 跨越操作系统windowsandroid万物互联在不同设备系统间共享数据协同工作一致体验。 我们看荣耀手机在业界首次实现了气息识别能力不需要提示词眼动追踪功能可以实现 30 公分内高精度的眼动捕捉增强游戏的交互能力提供相应的API。 我们希望手机能自动预测用户行为识别用户情绪理解用户自然语义音频分析提供跨应用APP的交互指引或者完成服务的直达。 我们希望手机能提供智能代理提供智能助理让它能帮助我们完成工作或事务。 AI 手机定义二我们需要改造手机操作系统让它跨系统/跨设备融合提供更好的交互方式提供智能助理让它能有更好的体验更智能。
二AI手机的技术
2.1手机芯片 这是Google最新手机的芯片可以理解为一颗SoCGoogle Tensor。
最关键的组件是 TPU专用机器学习和AI任务设计的处理单元。提供高效的张量运算。
ISP图像和视频处理可显著提升拍照和录像的质量。 MTK 天玑 9300 5nm工艺
专用APU专为AI任务优化处理复杂的AI算法如图像识别语音识别等 高通骁龙8 Gen3 可以装入 100亿的大模型4nm 工艺
集成了Qualcomm AI Engine最新的AI处理器。
集成了18-bit 三 ISP影像处理超强。 2.2大模型 对于公有云的大模型没什么可说的。可以用商用的但是手机厂商为了控制成本应该会提供一个自训的大模型或者商业联盟。上图是OPPO自研的大模型。
对于手机特定场景可能会存在垂直领域的专用模型比如OPPO的 Turbo 大模型这一般是行业模型基于通用大模型微调而成。微调的核心是行业数据。
对于手机端一定也会部署模型这应该也是为了成本和安全。对于海量的手机用户如果依赖于云端运算那算力要求太高并且成本高。一些特定场景完全可以做tiny模型比如OPPO的Tiny轻量模型。
2.3AI OS 对于AI os 关键是 LLM Kernel主要是封装对于LLM Model的调用Prompt调用以及上下文管理因为LLM的token的输入宽是有限的工具管理用于Agent的调用这个类似于 LangChain开源框架的处理。并且要注意智能代理系统包括一些典型应用的代理帮助开发者快速去开发相关应用。 我们拿VIVO的 BlueOS为例 它深度与AI集成 系统层和内核层都集成了专门的AI处理单元和算法确保系统能够高效处理各种AI任务。提供了AI大模型和计算加速平台使得AI应用能够快速响应和处理复杂任务。 丰富的AI应用和服务 提供多种AI原生应用和个性化服务满足用户的多样化需求。第三方应用可以调用系统的AI能力扩展了AI功能的应用场景。 高效的开发支持 完备的开发工具链和API接口支持开发者快速开发和集成AI功能。蓝河Studio和SDK等工具提供了一站式的开发和测试环境。 智能化的用户体验 通过AI技术提供智能助手、语音识别、翻译等个性化功能提升用户体验。AI感知和大模型的应用使得系统能够主动学习和适应用户行为提供更智能的服务。 2.4AI Agent 说到智能体我们可以用OPPO的 1N战略为例。
核心智能体1
智能中枢作为整个生态系统的核心超级智能体集成了强大的AI能力负责协调和管理各个子智能体的工作。智能决策能够进行复杂的智能决策整合来自不同子智能体的数据和信息为用户提供个性化和智能化的服务。学习和适应通过持续的学习和适应超级智能体可以不断优化和提升自己的智能水平满足用户的多样化需求。
子智能体N
智能体1、智能体2、智能体3...每个子智能体负责特定的功能和任务例如智能家居控制、健康监测、语音助手、图像识别等。模块化设计各个子智能体以模块化的方式设计可以根据不同应用场景进行灵活配置和扩展。协同工作子智能体之间通过超级智能体进行协同工作确保各项任务高效完成提供无缝的用户体验。
开发平台
开放生态OPPO AI Pro智能体开发平台为开发者提供了开放的开发环境支持第三方开发者创建和集成新的智能体丰富整个生态系统的功能。工具和支持平台提供了丰富的开发工具、SDK、API接口和技术支持帮助开发者快速开发、测试和部署智能体。创新驱动通过吸引开发者和合作伙伴参与推动技术创新和应用创新持续提升生态系统的智能水平和用户体验。 OPPO的AI手机平台通过增强创作能力、自学习能力、真实世界感知能力和算力高效利用能力驱动了智慧OS和智慧平台的全栈革新。同时通过构建原生服务生态、智能终端生态、大模型生态和算力生态重构了智能手机的生态系统。这一战略不仅提升了用户体验和设备性能还推动了智能手机向更高智能化和个性化的方向发展。 3AI 产品 手机上的AI产品大致如上图的重要应用。 我们在开发AI产品时可以考虑属于哪个类型然后寻找相应的智能代理或者核心代理将应用AI化。 4AI 产品的用户需求 早些年微信横行移动互联网初年手机主要是解决连接的问题。如上
与人的连接手机上各应用的连接与远程服务的连接与其它设备的连接。 对于AI手机的价值 主要突出以下几个点
更好的人机交互——不能仅仅是触屏了应该是全新的交互模式不限于语音眼球视频中的动作应该是更适合人的交互方式。提升体验人与设备无缝连接。智能服务——要理解用户及时响应环境和用户需求提供个性化的随时随地的服务。贴心陪伴——个人情感支持学习支撑提供知识。也就是提供人的情绪价值和学习价值。安全可靠——保护个人隐私提供更安全可信的环境。 这些核心价值共同构建了一个智能、贴心且安全的AI手机生态系统全面提升了用户的使用体验和满意度。
5AI 手机行业的思考 提供 tiny的模型如100亿参数以内目前已经有不少移植到手机上几款手机芯片都已支持不过是否可以在本地很好的支撑应用还是未知的。目前看到的应用更多是调用的公网的商用模型超过千亿参数的这主要是看需求。 手机平台方需要提供新交互的底层支撑。如气息识别眼动识别视频识别之类的并形成标准的新交互指引。 手机APP很活跃用AI来改造可以很快推广但是大模型提供的不确定性和幻觉需要得到控制。所以手机厂商应该通过代理服务来屏蔽和解决类似问题因此需要有更好的开发平台。针对android最好是还有一个统一的开发框架而不是一款手机来一套至少用框架来规范化相应的开发然后适配不同手机。 手机仍然是应用为王第一拨要改造的肯定是那些明星应用比如京东美团点评携程抖音之类的常见应用。如果这些应用有突破或者成为手机的底层服务那将大大加快APP的AI化。 还是比较看好AI先在手机上突破或许它比在制造业在企业信息化的路径上更短更快。
