华为HiLens的主要功能和产品优势以及HiLens的应用场景

端云协同挑战

端到端AI应用方案开发者面临的挑战

• 端侧自身算力有限、开发技能困难
• 端侧升级技能、维护成本高
• 从云侧开发技能并下发到端侧，端侧兼容性差，部署技能困难

端边云协同的优势

方案对比

传统方案缺陷

• 视频上云带宽成本高
• 云上分析、存储成本高
• 全量视频上云，涉及隐私

HiLens优势

• AI分析本地运行，方案成本低
• 云侧海量AI能力便捷获取
• 保护隐私
• 支持第三方开发技能

端边云协同

何为边缘计算

• 在边缘侧发起计算，以实现实时业务、应用智能等

何为智能边缘

• 智能边缘就是将简单的边缘节点智能化，将云上AI能力下沉到边缘节点，做到本地处理

何为端边云协同

• 端边云协同要求统一线上线下技术生态，统一AI架构，打通云/边/端Al数据流通道，实现边侧、端侧智能化

华为云HiLens服务

华为HiLens：端云协同AI应用敏捷开发和部署管理套件

• 一次开发，多类型终端敏捷调试部署

开发框架

• 封装了视频分析算法的基础组件，如图像处理、推理、日志等，开发者只需少量代码即可开发自己的Skill

开发环境HiLens Studio

• 提供给开发者的一种多语言类集成开发环境，包括代码编辑器、编译器、调试器等，开发者可以在HiLens Studio中编写和调试技能代码

管理控制台

• 提供模型管理、技能开发等功能，供用户在云侧管理模型和技能，一键安装技能到端侧设备

多模态AI技能

• 技能市场预置丰富的AI技能，支持部署算法到端侧设备，覆盖商超、家庭、园区等多种商用场景

HiLens技能市场快速验证，技能模板快速入门

技能市场

• 华为HiLens技能市场为用户提供多种场景下的AI技能，种类丰富，一键安装

技能（Skill）

运行在端侧摄像头的人工智能应用，一般由模型和逻辑代码组成

• 逻辑代码是技能的框架，负责控制技能的运行，包括数据读入、模型导入、模型推理、结果输出等

• 模型是人工智能算法经由大数据训练而成，负责技能运行中关键场景的推理

ModelArts Pro控制台

提供可训练技能工作流，使用可训练技能模板在ModelArts Pro控制台自主上传数据训练模型，无需代码，即可快速提高模型精度，创建技能，并且一键部署至设备

HiLens Studio：云上开发IDE，无需环境搭建

• 提供给开发者的多语言类集成开发环境，包括代码编辑器、编译器、调试器等

• HiLens Studio当前支持Python 3.7和C++技能的开发、调试

华为HiLens开发框架全面升级ModelBox

• AI应用开发框架HiLens Framework，全面升级并纳入ModelMox

• 一套AI应用框架，实现"开发-部署-运行”端边云统一

• https://modelbox-ai.com/

• ModelBox是一套专门为AI开发者提供的易于使用，高效，高扩展的AI推理开发框架，它可以帮助AI开发者快速完成从模型文件到AI推理应用的开发和上线工作，降低AI算法落地门槛，同时带来AI应用的高稳定性和极致性能

ModelBox 优势

• ModelBox统一算法模型打包格式，实现端边云接口统一

• HiLens平台打通AI应用市场，无缝部署，促进AI用生态繁荣

• 解决AI开发者在开发AI应用时的编程复杂度，降低AI应用的开发难度，将复杂的数据处理，并发互斥，多设备协同，组件复用，数据通信，交由ModelBox处理

• 开发者主要聚焦业务逻辑本身，而不是软件细节

• 在提高AI推理开发的效率同时，保证软件的性能，可靠性，安全性等属性

华为HiLens服务优势

HiLens应用场景及案例

HiLens端云协同多模态AI开发应用平台

提供简单易用的开发框架、开箱即用的开发环境、丰富的AI技能市场和云上管理平台。对接多种端侧计算设备，支持视觉及听觉AI应用开发、AI应用在线部署、海量设备管理等

家庭+AI，无微不至，更多温馨

人形检测&哭声识别

老人/小孩智能关怀

物体识别

家庭物体&菜类等识别

人行检测&人脸识别

陌生人监控告警

视频人脸标签&属性识别

家庭成员智能分析检索儿童时光相册

商超+AI，智能监控，自动分析

客流量统计

统计指定区域出入人数

新老客户统计

基于人脸识别技术

人流热力图

园区+AI，安全升级，智慧管理

入侵检测

实时监控园区安全

人脸识别门禁

刷脸智能系统

异常声音检测

玻璃破碎等异常声音告警

车牌识别

识别车辆进门权限

华为HiLens+NTT Data -> 智慧4S店

• 基于HiLens平台与HiLens Kit的解决方案，支撑店内客户旅程体验分析和优化。
• NTT Data提供整体智慧门店解决方案，集成华为服务

背景

华为与NTT Data联合开发的智慧4S店解决方案，让数据产生价值，通过数据驱动重构线下 门店销售模式。 • 基于Huawei Hilens 多模态AI开发套件可以便捷的构建智慧门店系统，分析客户在店情绪变 化，通过客户的行为和表情判定客户在进店/体验/配车/洽谈和出店流程中体验情况。结合 历史数据完成客户画像分析，对不同身份的潜客/车主，根据线上数据与店内行为结合判断 其实际需求，通过推荐模型对不同身份用户给予特定服务指引，提升服务体验及满意度。

总结

• 无个性化精确营销方案
• 带宽有限，无法全量集中式视频分析
• 不同门店场景不同，算法需求不同

解决方案

• 端云协同，端侧高性能并行AI分析，云侧仅需图片识别，极大降低成本
• 极简部署：端侧技能一键安装
• 端侧技能按需下发与更新

客户价值

• 精准匹配用户画像，千人千面个性化定制
• 统一信息化管理与运营
• 线上线下数据打通，线上互动流量引流至线下，线下客户详细资料完善线上画像
• 打通整体生态，提升用户转化率

智易停 + 华为云HiLens端云协同->无感停车管理系统

• HiLens简单的端侧采集端部署模式，利于大面积铺设，且降低了项目的投入成本和建设周期；引入高效智能的端云协同车牌识别技术，大大降低了人工运营维护成本；识别率提升75%，人工审核降低50%，投诉率降低50%

背景

和昌未来科技致力于提供行业领先的城市道路智慧管理一体化的平台运营服务，解决城市道路停车管理、静态交通管理、智能安防、智慧家居等问题，打造城市智慧停车一张图，服务公众安全出行，建设先进智慧城市

挑战

“停车难，乱停车，乱收费”等城市交通难题日益凸显，现有的电子路边停车管理系统安装审批难，建设运营成本高，且受环境干扰因素打，不能全自动识别车牌，停车结束之后，无法满足驾驶员反向查车的功能

总结

• 路边车牌人力审核成本高
• 低成本芯片算力非常有限
• 应用场景中要求模型高精度

解决方案

• 端侧过滤数据，云上二次精确识别
• 针对车牌角度特殊的场景需求，提供高精度车牌识别算法

客户价值

• 实现路边智能停车系统，自动高精度识别车牌号，大大降低人力成本
• 增加管理系统信息统计维度，如车位使用率等，向用户提供更多增值服务

上海交大无人车竞赛

• 基于ModelArts AI开发平台训练模型，通过HiLens Studio开发AI应用，一键安装到HiLens Kit上运行，实现小车红绿灯检测、行人避障、路线识别等自动驾驶功能

背景

华为云人工智能大赛·无人车挑战杯总决赛主要赛点包括：实现交通灯识别、环岛行驶、U形弯道行驶、静态 / 动态障碍物避障，并准确识别停车位标示进行泊车。在总决赛中，小车不仅仅要完成所有的赛点，还要跑得快

挑战

传统方式模型部署流程比较复杂，模型推理需要安装必要的依赖库，这些库的配置在传统工控机上并不容易，尤其是具有ARM架构的工控机；更重要的是对于无人驾驶这样的高速实时系统，模型推理的速度是最为关键的，实时推理对算力要求很高

总结

• AI开发入门门槛高，传统工控机部署流程复杂
• 无人车具备一定行驶速度，要求实时推理
• 算法更新流程复杂

解决方案

• ModelArts数据处理、模型训练，并提供预置算法
• HiLens Studio云上开发环境，环境免搭建
• HiLens开发框架封装开发组件，大大提升开发效率
• 在线更新技能，实时提升模型精度，多种技能入门模板

客户价值

• 提供端到端AI开发流程，提升开发效率与体验
• 使参赛者专注于开发AI应用，节省底软知识学习成本
• 一键更新模型，随时刷新比赛成绩
• 降低AI入门门槛，吸引更多参赛者加入

人工智能入门级开发者认证

• https://edu.huaweicloud.com/certificationindex/developer/aaabf9760a3f4578aa620155e1fcae86