MR虚实融合,商汤科技用AI技术赋能世界人工智能大会

原标题:MR虚实融合,商汤科技用AI技术赋能世界人工智能大会

今天,2020世界人工智能大会(WAIC)主论坛隆重召开,本届大会主要以线上播出的形式呈现,众多海内外专家大咖通过云端连线远程参会、视频演讲。在这场全球最前沿且最具影响力的AI行业盛会上,共话人工智能技术的发展方向及其为全球人类的进步所带来的意义和价值,同时大会还展示了一系列创新的人工智能成果。

此外,商汤还将创新的AI技术应用于大会开幕式,为远程演讲嘉宾进行视频背景的分割和替换,使之统一为会场主视觉;并在会场外的走廊中构建了一座虚实融合的MR展区。

发布会上,汤晓鸥教授在大会开幕式的视频祝词中讲到:“人工智能是一个非常包容的学术领域,人工智能不仅跨越学术研究领域、跨越工业应用行业,也跨越学术和产业边界。最重要的是,人工智能是跨越国界的,是需要国际合作的。人工智能发展的未来,需要我们各领域的学者、各产业的工程师、各国家的研究人员,紧密合作,共同努力。人工智能的未来,人类的未来,一定是大爱[AI]无疆的。”

值得一提的 是,开幕式当晚,商汤科技联合创始人、首席执行官徐立还将参加大会特别举办的“AI夜话”环节,与网易董事局主席兼CEO丁磊、哔哩哔哩董事长兼CEO陈睿、金沙江投资董事总经理朱啸虎等诸多企业大咖,以“AI赋能在线新经济”为话题共同展开讨论。

AI背景助手,让全息影像更加真实

线上演讲可以解决空间和时间的限制,特别是在当下的大环境下,很多嘉宾和学者无法到达现场,只能通过视频录制或连线的方式远程参会。然而,线上录制的视频会遇到背景画面不统一、环境不正式的问题,有的在办公室,有的在家里录制,因此可能会使整个活动看起来杂乱不专业,甚至影响观众的观看感受。

为了应对和解决这些潜在问题,商汤科技为WAIC主办方提供了“AI背景助手”解决方案,可以在演讲视频中准确检测出人物和背景,将其分离成不同图层,并把视频背景替换成大会的主视觉或虚拟会堂,从而让所有演讲者的视频画面风格统一;或者结合全息影像技术,让远程演讲嘉宾的影像惟妙惟肖地出现在大会舞台上,犹如亲临现场。

主论坛中,联合国数字合作高级别小组联合主席马云,黑石集团创始人、董事长兼 CEO苏世民,SAP 全球总裁柯睿安(Christian Klein),高通公司总裁安蒙等未能到场的重磅嘉宾都是通过全息投影的方式虚拟出镜,让观众感觉和远在万里之外的演讲人面对面,大大提升了参会体验,这正体现了商汤AI技术的价值所在。

商汤的“AI背景助手”是基于“高质量实时分割及高精度抠像”技术而实现,其核心优势是全自动处理,无需人工干预,并可进行实时预览,输出高质量分割结果,且无需绿幕录制,相较人工抠像效率更高。目前,商汤已将这项技术广泛应用与短视频、直播、在线教育等平台和应用场景,例如美颜APP中的创意拍照贴纸、短视频APP中的创意背景分割,以及在线教育平台中老师在线授课的背景替换等。

MR虚实融合,“不存在”的展区更炫酷

除了视频演讲中的AI背景助手,商汤科技还为本次WAIC专门打造了一座虚实融合的MR展区。在开幕式外的走廊中,通过平板电脑等硬件设备,就可以看到一座现实中“不存在”的虚拟展区,其中可以通过虚拟照片墙回顾历届WAIC的精彩演讲及创新展项等画面,并观看本届大会线上云展厅先导区中六家核心企业,商汤科技、京东智联云、亚马逊AWS、阿里巴巴、腾讯、微软的虚拟展台,让观看者犹如置身其中,感受大会的创新氛围和科技感。

此外,商汤还通过MR技术将 “海洋馆”搬到了WAIC的大会现场,观众可以通过平板电脑在空旷的走廊里观赏一头长达15米的虚拟座头鲸在场馆中自由翱翔,肆意跳跃,似乎在庆祝WAIC大会的成功举办。虚拟的MR灯光还在海洋中透射出大会主题“智联世界 共同家园”的字样,而这一切都是通过商汤的AI技术实现,让嘉宾和观众犹如身临其境。

MR应用是商汤在AR基础上的全新升级,结合了更多AI和MR的技术和能力,可在多种系统平台和终端设备上实现极具沉浸式的虚实融合视觉效果和互动体验,以更好地满足和引领市场及行业的需求。目前,商汤已将这一技术推广于博物馆、展览馆、风景区、机场等文旅场景,例如在与故宫文化合作的“金榜题名”展览中等比例还原虚拟的孔子,让现代人也能与孔圣人行礼互动;以及联合湖北省博物馆打造的“虚拟曾侯乙编钟”,通过MR的形式让两千年前的乐器任意敲响。

数字人导览员,互动讲解惟妙惟肖

值得一提的是,商汤还在走廊中定制化打造了一座实体“数字人”展台,以“AI+应用场景”为主题,展现了AI技术在医疗、教育、文博、工业、科研五大领域的应用与落地。特别值得关注的是,展台上有一位特殊的数字人导览员“小糖”,是基于商汤创新的Avatar技术专属打造,可以生成惟妙惟肖的表情和动作,与观众问好互动。

作为展台的专属导览员,数字人“小糖”可以准确感知来宾到访,并在每个展项前依次移动,带领观众参观体验,栩栩如生地讲述每个展项背后的故事。

商汤的“数字人”技术将AI仿真动画生成能力与自然语言理解能力相结合,通过实时分析用户的视觉和语音信息,根据表达内容生成相应的嘴形、表情、眼神及全身动作,输出高质量、音视频同步的语音和三维动画内容,向用户呈现完整自然的数字人形象。

可以说无论是AI背景分割,还是MR虚实融合,商汤科技始终坚持原创,力求通过创新的人工智能技术为行业和场景赋能。在今年WAIC大会的特殊背景条件下,商汤不仅助力大会实现了线上线下结合的完美呈现,更开拓了MR混合增强现实技术的应用潜力,推动这一技术的创新和应用。

极客网企业会员

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。

2020-07-09
MR虚实融合,商汤科技用AI技术赋能世界人工智能大会
为了应对和解决这些潜在问题,商汤科技为WAIC主办方提供了“AI背景助手”解决方案,可以在演讲视频中准确检测出人物和背景,将其分离成不同图层,并把视频背景替换成大会的主视觉或虚拟会堂,从而让所有演讲者

长按扫码 阅读全文