耳机|VR技术公司「叠境数字」获2000万美元A+轮融资,阿里巴巴领投( 二 )


利用这些数据积累 , 再借助AI算法和一段时间的深度学习训练人脸表情 , 最终的训练结果是虚拟数字人在嘴角眼部的张合幅度、眼神的细微变化、肌肉的轻微颤抖等表情几乎与真人接近一致 。
特色优势:
·零干预全自动完成3D模型重建
·亚微米级超高精度还原
·光场渲染最真呈现
·全球顶级动态模型重建
·符合人眼观看习惯
·跨平台、跨终端

应用场景:

#3 动态捕捉

`3D动态直播
通过多台摄像机同步拍摄体育赛事、大型电视节目等直播画面 , 用户通过滑动手机屏幕实现表演者不同视角间快速 , 流畅地切换
`时间静态凝固
通过多相机间的高精度同步 , 实现所有相机每一帧的毫秒级同步采集 , 从而确保高精度时间凝结效果输出
特色优势
·交互式自由视角观看
通过交互式滑动手机屏幕方式 , 用户从“观众”变“导演” , 360°全方位观看 , 随时切换直播场景中任意视角画面 , 实现多维交互体验
·运动状态下“时间凝固”
通过多台高精度相机向内环拍 , 精确毫秒级同步拍摄选手连续运动状态下的多视角 转瞬即逝精彩画面
·安装轻便
DGene系统轻便小巧、结构简单 , 具有操作灵活、安装简易等优点

技术解决方案
·影视特效
·赛事直播


现有的科技成果
#1 TightCap
今年8月 , 叠境数字与上海科技大学的合作成果“TightCap: 3D Human Shape Capture with Clothing Tightness Field”(以下简称“TightCap”)被计算机图形学的顶级期刊TOG (ACM Transactions on Graphics 2021)接收 。
TightCap提出了一种全新的数据驱动的人体体型与服装的估计方法 。 该方法只需一次3D人体扫描即可准确捕捉体型与着装信息 , 并能够实现虚拟试穿、生物识别、身体评估等众多应用 。
该方法提出了一种新颖的框架 , 通过衣服松紧度公式来定义衣服与体型关系 , 并用深度神经网络预测未知服装的3D松紧度场 , 综合优化体型与提取服装 , 构建多层级的穿衣虚拟角色 。
通过该技术 , 我们能够为虚拟世界中的人物形象 , 提供更为自然的衣着表现 , 为构建更为真实的元宇宙提供底层技术能力 。

#2 上海首个数字孪生博物馆系统

9月27日 , 上海首个数字孪生博物馆系统在上历博(上革博)上线 。
依托上海城市运行“一网统管”的框架和上海城市运行数字体征的理念 , 对上历博(上革博)及周边进行了超精细三维数字化复原 , 利用三维数字孪生引擎实现了博物馆大楼内外的1:1三维数字孪生 , 并对接政府业务数据、物联感知数据、环境天气等多维实时动态数据 , 让博物馆“活”起来 , 开启全新元宇宙平行世界 。
#3 叠境数字自由视点直播系统
今年10月的2021年第十四届全国运动会上 , 叠境数字科技利用部署的50台超高清4K摄像机 , 实时捕捉现场精彩的比赛画面 , 并经过现场网络传输将50路视频信号送入自由视点信号处理服务站 , 提供符合电视机顶盒等播放平台可识别的自由视点直播信号 , 并输出至播控平台进行分发播出 。
叠境数字自由视点直播系统 , 大幅度提升传统体育赛事直播观赛体验 , 打造了极具真实感和现场感的全新视觉盛宴 , 让屏幕前的观众跨时空“亲临”赛场 , 直击精彩瞬间!
#4 “无穿戴动捕”系统首亮相 , 记者可随处直播

“无穿戴动捕”系统作为三维实时交互的创新技术 , 首次服务于第四届进博会新闻中心 , 记者们可以变身成可爱的“进宝”熊猫 , 快速发布进博会相关报道!叠境数字与域动科技联合推出的“无穿戴动捕”系统 , 具有高实时、无穿戴、高精度等特点 , 必将成为元宇宙人机交互核心技术 , 赋能未来融媒体节目制作 。