Jason Yang：利用深度学习实现更少拍摄带来更精准重现

10月20日上午，2019世界VR产业大会“人工智能”分论坛召开。本次活动由上海科技大学VR与视觉计算中心、叠境数字科技（上海）有限公司承办，工业和信息化部电子第五研究所、江西优联投资发展有限公司协办。本次活动以“5G+AI重塑XR未来”为主题，对5G+AI 将给VR/AR带来趋势变化进行了深入的讨论。

叠境数字公司联合创始人、CTO Jason Yang在会上表示，利用深度学习实现更少拍摄带来更精准重现。目前电影界使用AI技术已经非常广泛。随着科学和技术的进步，我们能够从电影世界当中感受到AI的进步。除了电影，在现实生活中AI的应用也非常多，包括生活中的机器人、虚拟现实的模拟等。当我们希望将现实和虚拟技术重叠在一起会有更多的挑战。

而我们所做的技术，比如这个3D的游戏，游戏里面加了虚拟现实以后，能够使得游戏变得更加有趣，比如脸书公司利用AI技术来更好地帮助企业发展和实现更多更好地人和人之间的互动。

表情研究、表情分析在AI中的应用以及VR中的应用越来越广泛。我们公司的业务之一是对表情进行分析研究。在这个视频中，我们看到被拍摄的人物是在动的，所以在虚拟现实中对他进行模拟重建是比较困难的，因为有很多的问题，比如真人成像过程中，我们要看到头发、皮肤、眼睛、嘴巴、脖子等，这些真实现实的生物元素进行处理很复杂，在渲染的过程中要花非常多的精力。传统的3D三维的重塑，利用很多的摄像机，对准要成像的真实人物进行拍摄，然后进行3D建模，依然看到很多不足，因为尽管放了足够多的摄像机之后，依然有很多动作、角度、肢体的信息无法精准捕捉进来，因为身体有些部分是被遮挡住的。所以我们需要利用更多的数据来解决这些问题。我们采用深度学习等技术进行数据的分析和研究，同时与上海理工大学进行合作，就可以使用更少的相机拍摄，捕捉到更多的画面。我们也在和华为进行合作，考虑是否可以使用相机，把现实中的人创造成一个虚拟的人。