授课老师: 耿杰
常驻地: 北京

课程基本信息

课程名称:端侧AI应用与行业趋势:技术演进、典型案例与商业机会洞察

目标客户:关注端侧AI产品规划与业务决策的企业

目标学员:产品经理、业务负责人、战略规划人员、技术管理人员

课程时长:1天(6小时)

授课方式:讲座式 + 案例研讨 + 趋势研判工作坊

讲师:耿杰

课程目标

1. 全面了解端侧AI的技术演进路径、最新进展与核心趋势,建立系统认知框架。

2. 掌握端侧AI在手机、汽车、IoT、PC、穿戴设备等典型场景的应用案例与落地逻辑。

3. 能够结合企业自身业务,判断端侧AI的未来发展方向与商业机会,输出产品规划与业务决策建议。

课程大纲

开场:什么是端侧AI?为什么它正在重塑产品形态?(30分钟)

学习目标:

建立端侧AI的基本概念,理解其与云端AI的本质差异和商业价值。

核心内容:

1. 端侧AI的定义:在终端设备(手机、汽车、IoT设备、PC等)本地运行的AI能力,而非完全依赖云端。

2. 端侧AI vs 云端AI:延迟、隐私、成本、可靠性、离线可用性的权衡。

3. 端侧AI爆发的三大驱动力:

  - 算力提升:NPU、DSP、专用AI芯片性能快速提升。

  - 模型小型化:模型蒸馏、量化、剪枝、MoE架构让大模型能在端侧运行。

  - 隐私与合规需求:数据本地化、监管要求、企业数据安全。

4. 端侧AI对产品形态的影响:从"联网调用"到"本地智能",从"功能软件"到"智能体入口"。

案例/数据:

2024年全球智能手机端侧AI渗透率快速提升,主流旗舰手机均已搭载NPU或AI专用算力(来源:高通、联发科公开数据)。

苹果Apple Intelligence将大量模型推理放在本地设备上,仅在复杂任务时调用云端(来源:Apple WWDC公开资料)。

互动/练习:

小组讨论:你所在的业务场景中,哪些功能更适合端侧运行,哪些必须云端处理?

模块一:端侧AI最新技术进展与发展趋势(120分钟)

学习目标:

系统掌握端侧AI的技术栈、最新进展和未来趋势。

核心内容:

1. 端侧AI芯片与算力演进:

  - NPU成为手机SoC标配:高通骁龙8 Gen 3/Elite、联发科天玑9300/9400、苹果A17 Pro/A18 Pro的NPU算力对比。

  - 端侧AI芯片的玩家格局:高通、联发科、苹果、华为海思、三星、紫光展锐、寒武纪、地平线等。

  - 车端算力:英伟达Orin/Xavier、高通骁龙Ride、华为MDC、地平线征程系列。

2. 端侧模型小型化技术:

  - 模型蒸馏:用大模型教小模型,如Google Gemma、Meta Llama 3小参数版本。

  - 量化与剪枝:INT4/INT8量化、结构化剪枝、动态批处理。

  - 端侧大模型进展:Meta Llama 3.1/3.2、Google Gemma 2、苹果端侧模型、小米MiLM、vivo蓝心大模型端侧版、OPPO安第斯大模型端侧版。

3. 端侧AI操作系统与框架:

  - 端侧AI框架:TensorFlow Lite、ONNX Runtime、Core ML、Qualcomm AI Stack、MediaTek NeuroPilot。

  - 操作系统级AI:Apple Intelligence、Google Gemini Nano、三星Galaxy AI、华为鸿蒙AI能力。

4. 端云协同架构:

  - 端侧处理简单任务,云端处理复杂任务的分层架构。

  - 模型路由与隐私计算:根据任务复杂度、网络状态、数据敏感度动态选择执行位置。

5. 未来趋势:

  - 端侧模型参数持续增大,未来12-24个月可能普及7B-13B参数端侧模型。

  - 多模态端侧AI:文本、图像、语音、视频在本地融合处理。

  - AI Agent端侧化:个人助理、设备管家、智能体生态。

案例/数据:

高通骁龙8 Elite的NPU算力达到约45 TOPS,支持端侧多模态AI(来源:高通公开发布会)。

联发科天玑9400集成AI处理器NPU 890,支持端侧LoRA训练与视频生成(来源:联发科公开资料)。

苹果在iPhone 16系列中搭载A18 Pro芯片,支持Apple Intelligence本地推理(来源:Apple公开资料)。

华为Mate 70系列搭载盘古大模型端侧能力,支持本地文档摘要、图像处理等(来源:华为公开资料)。

互动/练习:

技术趋势雷达图:从技术成熟度、商业落地速度、企业自身相关性三个维度,评估端侧AI关键技术趋势。

小组讨论:端侧模型变大后,对芯片、散热、电池、产品成本会带来哪些连锁影响?

模块二:端侧AI典型应用案例(150分钟)

学习目标:

通过跨行业典型案例,理解端侧AI的落地逻辑和价值。

核心内容:

1. 智能手机:端侧AI最成熟的市场

  - 影像增强:AI降噪、AI修图、AI扩图、视频实时优化。

  - 智能助手:本地语义理解、离线语音助手、端侧大模型对话。

  - 效率工具:本地文档摘要、会议纪要、实时翻译、智能回复建议。

  - 安全与隐私:本地人脸/指纹识别、端侧欺诈检测。

2. 智能汽车:端侧AI的下一个主战场

  - 自动驾驶:特斯拉FSD、华为ADS、理想城市NOA的端侧感知与决策。

  - 智能座舱:本地语音助手、驾驶员状态监测、端侧个性化推荐。

  - 车端大模型:端侧语义理解、车控指令执行、故障预测。

3. 智能家居与IoT:端侧AI让设备真正"智能"

  - 智能摄像头:本地人形检测、行为识别、隐私保护(不上传视频)。

  - 智能音箱:本地唤醒、离线语音控制、端侧语义理解。

  - 可穿戴设备:健康监测(心率、血氧、睡眠)、跌倒检测、运动姿态识别。

  - 工业IoT:边缘质检、设备预测性维护、能耗优化。

4. PC与办公:端侧AI生产力工具

  - AI PC:本地文档处理、代码辅助、会议纪要、图像生成。

  - Windows Copilot+ PC、Mac Apple Intelligence、联想AI PC等。

5. 机器人与硬件:端侧AI的新载体

  - 人形机器人:本地环境感知、运动控制、人机交互。

  - 无人机:端侧目标识别、避障、路径规划。

  - XR/AR眼镜:实时翻译、空间识别、虚实融合交互。

案例/数据:

三星Galaxy S24系列搭载Galaxy AI,支持端侧实时通话翻译、会议纪要等功能(来源:三星公开发布会)。

小米澎湃OS 2整合HyperAI,支持端侧大模型,实现智能图像搜索、AI写作等功能(来源:小米公开发布会)。

理想汽车城市NOA基于端到端+VLM架构,车端算力支持复杂城市场景决策(来源:理想汽车公开技术分享)。

特斯拉FSD V12采用端到端神经网络,大量推理在车端完成(来源:特斯拉公开资料)。

萤石网络、大华股份等推出的智能摄像头支持端侧AI人形检测,降低云端流量与隐私风险(来源:企业公开产品资料)。

科沃斯、石头科技等扫地机器人搭载端侧AI,实现本地建图、障碍物识别与路径规划(来源:企业公开产品资料)。

互动/练习:

案例拆解:选择1个端侧AI案例,分析其"技术方案、商业模式、用户价值、竞争壁垒"。

跨界迁移:手机/汽车/IoT的端侧AI能力,哪些可以迁移到你们所在的行业?

模块三:端侧AI未来发展方向与商业机会洞察(90分钟)

学习目标:

掌握端侧AI未来发展方向,能够识别企业级商业机会。

核心内容:

1. 端侧AI发展的五大方向:

  - 端侧大模型普及:从当前1B-7B参数向更大规模演进。

  - 多模态端侧AI:文本+图像+语音+视频在端侧融合。

  - AI Agent端侧化:设备级智能体、跨应用操作、个人数字助理。

  - 端云协同深化:根据任务动态分配算力,形成"端-边-云"一体化智能。

  - 端侧AI安全与隐私:本地联邦学习、端侧加密、可信执行环境。

2. 商业机会图谱:

  - 芯片层:NPU、端侧AI SoC、存算一体芯片。

  - 模型层:端侧大模型、垂直行业小模型、模型压缩工具。

  - 工具层:端侧AI开发框架、模型优化工具、端云协同平台。

  - 应用层:智能设备、AI原生应用、企业端侧解决方案。

  - 服务层:端侧AI咨询、部署、运维、数据标注、模型调优。

3. 不同行业的端侧AI机会:

  - 消费电子:硬件差异化、AI功能订阅、换机周期驱动。

  - 汽车:自动驾驶、智能座舱、售后增值服务的端侧化。

  - 工业:边缘质检、预测性维护、柔性生产。

  - 医疗:可穿戴健康监测、本地诊断辅助、数据隐私保护。

  - 金融:端侧风控、本地身份认证、隐私计算。

4. 产品规划与业务决策建议:

  - 端侧AI项目评估矩阵:技术成熟度、用户需求强度、商业ROI、竞争差异化。

  - 端侧AI落地的典型路径:单点功能→系统集成→生态构建。

  - 风险识别:算力成本、散热续航、模型迭代、数据隐私、监管合规。

案例/数据:

2024年全球AI手机出货量占比快速提升, Canalys等机构预测2025年AI手机将成为旗舰机标配(来源:Canalys公开报告)。

端侧AI PC市场:Intel、AMD、高通均推出AI PC芯片,Windows Copilot+ PC生态逐步扩展(来源:Intel、AMD、高通、微软公开资料)。

端侧AI在工业质检领域市场规模持续增长,预计边缘AI在制造业的渗透率将快速提升(来源:IDC等第三方公开报告)。

互动/练习:

商业机会画布:结合自身业务,填写"端侧AI机会画布"(目标用户、痛点、端侧AI方案、价值主张、关键资源、风险)。

小组辩论:端侧AI未来3年,最大的商业机会是在消费电子、汽车,还是在工业/企业市场?

总结:从产品规划到业务决策——端侧AI行动清单(30分钟)

学习目标:

帮助学员将一天所学转化为可落地的行动建议。

核心内容:

1. 端侧AI产品规划的五个关键问题:

  - 什么功能必须本地跑?

  - 用户愿意为端侧AI多付多少成本?

  - 数据隐私与合规边界在哪里?

  - 技术路线选择:自研、芯片厂商方案、第三方模型?

  - 如何设计端云协同体验?

2. 业务决策三步法:

  - 第一步:盘点现有产品/业务中的"端侧AI适配点"。

  - 第二步:评估端侧AI的技术成熟度与商业ROI。

  - 第三步:小规模试点,快速验证,再决定是否规模化。

3. 端侧AI产品路线图模板:短期(功能增强)、中期(端侧大模型)、长期(AI Agent生态)。

互动/练习:

每人完成一份"端侧AI业务决策一页纸":机会、风险、下一步、资源需求。

集体分享:学员提出1个最感兴趣的端侧AI商业机会,讲师点评可行性。

授课老师

耿杰 AI时代产品思维实战专家

常驻地:北京
邀请老师授课:13439064501 陈助理

主讲课程:《AI时代产品思维训练营》《AI驱动的产品决策与判断力提升》《企业数字化转型实战:从战略到落地》《数字化时代的产品创新与商业模式设计》《互联网产品从0到1:PMF验证与MVP设计》《产品从1到10:规模化增长与数据驱动决策》《复杂组织协同与跨部门推动实战》

耿杰老师的课程大纲

微信小程序

微信扫一扫体验

扫一扫加微信

返回
顶部