首页 » 99链接平台 » 「智京未来」开发实时互动的虚拟直播技术(主播虚拟直播真人技术)

「智京未来」开发实时互动的虚拟直播技术(主播虚拟直播真人技术)

少女玫瑰心 2024-11-04 03:01:13 0

扫一扫用手机浏览

文章目录 [+]

虚拟主播的流行背后反映的是用户对多样化形象及高可塑性内容的追求。
虚拟主播可根据用户喜好设置形象,才艺展示可突破真人主播的局限。
短视频平台快手上的虚拟主播“一禅和尚”曾在直播的49分钟内收获了64.9万个赞,观看人数峰值更是突破了25万人。
虚拟主播有可能成为在线直播新的增量,而其背后涉及到的动作、表情捕捉技术也将产生新的创业机会。
36氪近期接触到一家虚拟直播技术开发商智京未来,其主要业务即是为电商及短视频平台输出虚拟直播解决方案。

智京未来成立于2019年11月,希望打造由真人驱动并可与观众实时互动的虚拟主播。
通过人脸检测、表情识别技术来捕捉真人表情,再基于关键点识别技术实现真人与虚拟主播的匹配。
虚拟主播的形象设计可以借用已有卡通形象,也可以利用3D人脸重建技术按照真人照片来绘制。
据创始人王智武介绍,智京的3D人脸重建技术准确率达到90%。
此外,虚拟主播的身体动作也可与真人动作一一对应,其技术原理与脸部关键点识别技术类似。

智京未来表情驱动

「智京未来」开发实时互动的虚拟直播技术(主播虚拟直播真人技术) 99链接平台
(图片来自网络侵删)

公司从技术研发初期就决定使用深度摄像头进行表情、动作识别,而不采用动捕设备。
一方面是考虑到动捕设备成本高且使用不便,另一方面,通过算法进步已经可以持续提高脸部和身体识别的精度及范围。
公司还建立了各种常用动作的数据库,比如翻跟头、旋转等,用户可直接调取。

创始人王智武强调,除了表情和动作模拟,虚拟主播形象制作的另一个关键环节是美术渲染,美术效果的好坏关系到用户对虚拟主播的认可和喜爱程度。
智京基于Unity等游戏引擎,针对材质、色彩等开发了专有程序。

在直播中,智京的虚拟主播既可以代替真人主播出镜,也可以与真人主播实时互动。
这两种方式都需要由工作人员在背后驱动虚拟主播的表情和动作。
王智武表示随着5G和人工智能的发展,未来可以用AI来驱动虚拟主播。
利用AI深度学习功能,虚拟主播将能快速模仿真人的表达方式,成为真人的“虚拟孪生”。

公司目前主要服务B端用户,通过付费软件,定制模型以及电商直播抽成来盈利。
公司已经跟星咖互娱,一家拥有数百位直播红人的内容制作方达成合作,接下来会为公司提供虚拟主播技术解决方案。
公司也正在为电商平台开发虚拟主播。

除了直播,智京的虚拟形象制作技术还可以应用在短视频领域。
公司已经为公安部消防局宣传教育中心打造了消防儿歌学习视频。
通过摄像头捕捉真人表情和动作将之前需要花费数天完成的工作量在几个小时内完成。

消防儿歌

公司创始人王智武曾在北京六间房科技、完美世界等公司担任3D技术研发工作,熟悉3D动画制作全流程;核心团队成员曾在畅游、六间房科技担任高级动画师。

公司正在进行天使轮融资,团队在积极接触投资机构中。

标签:

相关文章

今天确认了(华为鸿蒙最让担忧确认)

时间定格于上月,华为HDC2024开发者大会在万众瞩目中拉开帷幕。此次盛会,不仅见证了HarmonyOS NEXT的华丽首秀,更预...

99链接平台 2025-02-10 阅读1342 评论0