华为云数字人 ,带你进入AIGC时代
数字人是什么?
数字人是一种以数字形式存在于数字空间中的虚拟人物,它具有拟人或真人的外貌、行为特点,并具备一定的智能和情感,可以进行交互和表达。数字人也可以被称之为虚拟形象、数字虚拟人、虚拟数字人等。数字人的核心技术主要包括计算机图形学、动作捕捉和驱动、图像渲染和人工智能等。目前市场上的数字人分为2D数字人即服务型数字人,和3D数字人即IP型数字人。市场上的数字人主要以2D数字人为主,通过真人拍摄训练而成的,应用电商直播,虚拟客服等场景。
华为云数字人:视频帮助 _ 数字内容生产线 MetaStudio_ 华为云
华为云媒体基础设施,打造AIGC数字内容生产黑土地
AIGC正在重新定义数字内容生产的新模式,AI大规模的商用变得非常重要,而创造力、算力和联接力则是关键。华为云构筑了AI Native的媒体基础设施,包括边缘云网格、盘古媒体大模型和媒体云服务,帮助开发者抓住AIGC视频和AIGC 3D的战略机会点,重塑数字内容生产、内容处理、及内容连接的模式。
媒体基础设施最下层的“边缘云网格”是覆盖全球的统一架构的存算网络,基于应用、体验、SIOA进行统一算网调度,为AI应用、AI模型提供边缘接入、边缘加速、边缘计算、边缘推理、边缘安全等一系列的服务,为开发者提供全球一致的计算存储网络服务。
中间层是盘古媒体大模型和媒体引擎,基于盘古L0基础模型和能力训练和构建的盘古媒体大模型,包括音频、视频、图形、图像等核心能力,并提供行业插件式的协同开发和按需编排的流水线,通过开放的行业插件式开发系统,基于伙伴优质内容资产,帮助伙伴训练场景化模型能力,在华为云上构筑场景化模型和应用。
上层的媒体云服务提供AIGC内容生产、AI MPC内容处理、AI EC内容联接与协同三大类服务。基于昇腾AI云服务和盘古大模型构建的华为云MetaStudio数字内容生产线,可基于AI生成数字人、视频和3D内容,通过数字人+视频+3D空间,满足千行万业场景化需求。
MetaStudio两大底层模型,构建三大能力
两大模型
语音大模型:百万小时、多语种、风格化语音数据集训练,仅需录制一种母语,可实现多语种泛化合成,支持中、英、西、法、葡、阿、泰等10+语种;仅需录制15秒语音,免训练直接推理合成,音色相似度>90%;支持喜、怒、哀、乐等拟人情感语音,支持闲聊、新闻、直播等10+风格。
数字人大模型:
• 动作模型:支持人物走动,动作编排,一键换装,包含丰富动作和分割标注的大规模侧脸和运动视频数据集。自研走动脸部精确检测和生成模型,支持-30~30度侧脸检测和生成算法;高精度运动跟踪算法,连续高准确率(99.9%) 动作跟踪模型;精细服装分割和生成模型,自研多模态生成模型,识别原服装,生成新服装。
• 表情模型:10+种动态表情生成,眼神精细矫正,高质量人和环境融合,自研渲染引擎合成高质量多样环境和可控表情数据集。独创眼神表征、拾取、纠正算法,自研眼神拾取、分类(准确率99%)和矫正深度学习模型;动态表情生成能力:基于扩散模型的可控动态表情生成算法;结合CG和AI能力的打光技术方案,CG和CV能力结合的环境光提取和打光渲染算法。
三大能力
视频制作:开发者通过控制台界面或者API输入文字或者语音即可生成一段视频,从传统的拍摄视频走向了AIGC时代的生成式视频,极大的提高了视频生成的效率。
数字人直播:可以进行持物直播、实景直播,实时互动让数字人直播更真实、更沉浸。提前设置问答库,通过弹幕捕捉,可以及时回答客户的问题,实现7*24小时不间断直播。
数字人智能交互:开发者能够通过Web SDK快速对接H5、小程序、安卓、iOS等主流平台,后台接入ASR、TTS、NLP、语音唤醒等AI能力,实现AI数字员工完成讲解、问答、服务、陪练等复杂场景任务。
携手伙伴,助力行业数字化业务创新
在零售行业华为云数字人携手徐福记,赋能经销商直播间,打造品牌、话术、形象统一的直播间,极大的降低了客户成本,给直播间带来了新流量,新增长!
数字人在各行各业应用越来越广,在教培行业,华为培训部200+数字人高效生成视频课程,节省专家人力;在企业服务方面,数字人盘活了数百万的文字资产,将晦涩难懂的说明书变成了清晰明了的数字人视频;在泛政府行业,楚天龙携手华为云数字人,打造政务大厅数字化,使智能客服更有人情味……AIGC-数字人不仅是为了娱乐,而是让企业用上AI,让AI变得不是那么遥不可及。
盘古媒体大模型不仅重塑内容生产与处理模式,还将重新定义人与人之间内容消费和连接的方式。华为云正携手合作伙伴,以技术创新为驱动,共同开启内容创作的新纪元,迈向更加智能、高效和个性化的媒体时代。
了解华为云数字人:https://console.huaweicloud.com/metaStudio/?region=cn-north-4#/metaStudio/workbench
- 点赞
- 收藏
- 关注作者
评论(0)