查看原文
其他

英雄体育VSPO胤风子工作室567:更专注虚拟视觉和引擎技术发展,拓展虚拟偶像等应用场景

东西文娱 共同虚拟 2023-10-23

东西精品沙龙系列

本期「未来的体育」

线下沙龙第三期


(会议现场点击下图即可阅读)



点击视频,直击现场体验


我是英雄体育VSPO胤风子工作室的567。

其实我加入集团才一年多,从去年下半年开始做了电竞相关的一些项目,到上个月开始更大规模地投入电竞制作当中。我会结合我在业界的一些从业经历、项目,加上我加入英雄体育之后的一些感悟,做一些分享。

英雄体育VSPO胤风子工作室总经理567



从传统CG和视效领域,向虚拟视觉、引擎、AI技术转型

我从 2016 年开始,对于视效和CG技术产生了一定的危机感,这危机感的来源是游戏的引擎技术对于 CG 技术的冲击。当时就觉得虚幻引擎突然变得非常强大,它的算力可以做到每秒 25 帧以上或 30 帧以上,同时它的视效呈现也还可以了,所以我当时就特别有危机感,叫我们团队开始往虚拟的视觉领域转型。

这个决定是非常成功的。因为五、六年后,我带了一个十几个人的核心团队加入VSPO,到现在团队规模已经超过了原来的团队,接近 100 个人。

我们刚刚开始来的时候是准备做虚拟人、虚拟偶像和虚拟数字人相关的一些技术,但是到去年,遇到KPL夏季赛总决赛的一个XR巨型项目,如果没有我们之前五、六年的虚拟视觉领域的积累,当时是不可能承办下来的。

我觉得我们在虚拟视觉领域,相对来说是走在国内比较前沿。今年大家都感受到了 AI 对于各行各业的冲击,对于我们视觉行业的冲击。我自己的想法是抱以比较欢迎、比较乐观的态度,因为我觉得我们一直是在艺术或者技术领域做选择题的人,那 AI 只是丰富了你做选择题的速度和成果的完成度。但是对于美术行业、音频行业、文案行业,可能冲击是非常大的,在这块也有一定的焦虑感。

我们工作室的定位是视效技术领域,我对技术的理解一直是技术要为美、为视觉、为内容、为创意服务的,而不是作为一个噱头出去讲故事。我们的主要的业务板块是赛事美术、包装制作、TVC 拍摄、CG 制作,这一块跟传统的 CG 和视效领域是比较接近的,但是我们更专注于在虚拟视觉和引擎技术这块的发展,包括光学动捕、虚拟偶像、虚拟前沿的技术和 AI 技术。光学动捕和虚拟偶像是我们工作室比较重要的业务主线。

我们核心优势是自主研发的一些虚拟系统,它可以做直播,可以做实时的互动,我们对于视觉视效这块领域的技术、美术呈现力是非常自信的。我们从创意创作开始到全案的落地,都是在自己手里,也会去用到一些工作室的产能的合作,但是都是对于我们虚拟资产制作的补充,而不是把技术放在外面。




XR在虚拟制作领域的优势:还原度高、实时呈现、降低成本

我对XR的理解是对于虚拟预备演播室的一个拓展。XR 的好处是什么呢?

第一点,绿幕背景对人边缘的处理会有一个绿色的异色,并且动起来的时候人物的纸片感会非常重,类似于背后有强烈光照的场景。预备演播室是没办法把光照还原给实拍的人的,但是XR可以做到背后有什么样的光照,前面的人也会受到这个光照的影响。

第二点,预备演播室是没办法在现场实时呈现虚拟景的,但是我们用到 XR 技术的话,我人在这个景里面,现场的观众也好,导演、导播也好,可以实时看到现场的虚拟场景。

XR我认为是非常好的降低成本的一种方式,比如汽车拍摄中,以前可能就是去沙漠等各种路跑,但是有XR的话很多场景可以通过虚拟制作来实现,这个在体育领域用的还是挺广的。



XR设备、实时拍摄、引擎技术的难点

在做的过程当中我发现,在这个领域还是有蛮多的技术难点在里面。

比如说XR通常有两种技术呈现模式,一种是弧形弧面屏,大家见得比较多;第二种就是我们KPL里面用到的三立体的立面屏。立面屏拍摄的范围更大,几乎可以拍到180度,但是它的难点在于三条边的接缝处理。因为镜头在运动的时候,RGB色彩一直在变,我们要在实时拍摄的过程中把这个变化处理掉,背后的算法和算力是比较难的。

在电竞领域,包括在实时直播领域,有一个难点,就是拍摄的摄像机只有一个最佳视角透视是对的。业界的解决方式就是提高刷新率,对于我们的技术是个全新的挑战。我们2022年底王者荣耀世界冠军杯KIC拍摄完成得还可以,在现场真的可以看到他身临其境处在这么一个虚拟环境当中,但其实画面中还是有点视角异动。

我们也挑战了引擎很难实现的一些东西, 比如说实时的虚拟人物。他是一个高精度的人物,同时也要做到实时舞台上的特效呈现。其实引擎比较好做的是一些坚硬的东西,像帷幔、布料这种柔软的东西,我们也做了一些技术上的突破。




虚拟视觉应用场景:虚拟偶像、动画制作、元宇宙

我们自主研发了一套叫VLS的系统,当时我们和项目组合作,项目组的舞美或者视效方案通常只能停留在PPT阶段。我们的系统能做到现场的灯光、大屏、舞美,都能实时做出虚拟呈现。世冠赛基本上用了这样一个技术,之后我们还用在了虚拟偶像的呈现上。

我们还自主搭建了一个光学动捕棚,比较适合做单人的动作捕捉,精度属于非常高的一个标准,可以做PICO这种VR全景的360度动作捕捉的呈现。另外我们和B站合作了虚拟女团的比较适合多人的动捕棚,结合我们自己开发的HDN系统,可以实时地采集人物的肢体、动作,放到虚拟场景中,通过虚拟引擎驱动虚拟的灯光、大屏、舞美,包括很多互动的功能。


我们在3月底一个虚拟偶像生日会,基本上是业界非常顶级的呈现。基于这样的技术,我们就想到了很多动画番剧的拍摄也可以用到这样一个技术。原来做这样一条15秒、30秒的镜头,可能至少需要十几个人的CG工作室,做一、两个月还未必能做到这个品质,现在只需要十几秒,所见即所得。

去年有很多虚拟的、元宇宙的发布会,就是用我们这套技术来做的,视效呈现非常好。我们现在研发的一个AI动捕,渗透性是比较高的。刚才说到的光学动捕棚,建设成本非常高,现在只需要一个网络或手机摄像头就能实现数据接入,全身的动捕效果也还可以,虽然做不到光学动捕这么高的精度,但是对于广大C端用户接入元宇宙的体验,这样就非常好。



「未来的体育」线下沙龙

「未来的体育」线下沙龙持续关注体育新周期的商业运营与商业模式探讨。随着线下回归,对于细分人群、不同品类的产品与服务,以及全新产业形态的管理与运营等方向的关注度得到提升。

Hello!
我们在为更加闭环、更加高效的服务模式做准备
欢迎加入限定白名单
与我们一起探索

数字人“竞技”百万身价虚拟人 柳夜熙  | 聆秋Rozy | 小K直播姬 | Ziva Dynamics | 小度 | 韩国的“虚拟人”Fable | 日本的“虚拟人” | Hikky|超次元 | “十五少女”| 爱化身 | 凌迪Style3D | 虚拟演员202 | 快手狐璃璃 | 数字员工 Jinn  ... ...


Rec Room 《堡垒之夜》 |《节奏光剑》《遗忘工程师》Syn City  | 《Pokémon GO》本土游戏UGC |《黑客帝国觉醒》体育游戏 | 主机游戏 | NFT游戏 | Gala Games | 《The Sandbox》| 《糖豆人》|《Play Together》 |  《职业时代》| 《Grimlord》| 《NFT ALL Stars》| 《方寸幻境》 | Gym Class | 《派对派》... ...


Cocos | Facebook | 软银 | 腾讯 | 百度 | 微软XGP| 迪士尼 | Epic与苹果 | 索尼元宇宙观 |  | LG U+ | Roblox | 索尼 | VTuber | 英伟达 | Unity | 育碧Scalar 腾讯云 |  派拉蒙 | Epic | Adobe | 集英社 | Discord |PICO |Vertigo Games | LayaBox ... ....


世悦星承次世文化|火山引擎| avatar动图宇宙 |Inworld AI | Synthesia | Burlingame Studio | Liv |Twitch | Brave Group | Hour One  | 粒界科技 | Wonder Interactive |Sequin AR | Motion Matching | NTT XR | 三丽鸥 | Dark Slope| Atoms Labs|Space Date ... ... 


聂辉华教授| 王国成教授 | 姜进章教授 | 臧志彭教授 | 稻见昌彦教授 | 华策影视集团总裁 傅斌星 | Layabox创始人谢成鸿 | 陈永东教授 | 博采传媒创始人 李炼 | 七创社董事长 许怡然 | 蔚领时代 郭建君 |OUTPUT 刘茵梦... ...


AR市场趋势观察 海外产业观察  | 日本市场 | 全球芯片 |  韩国NFT | 体育IP进军元宇宙  | VR虚拟试驾 | Authentic Artists |  五感交流 | 3D 虚拟社交| VR开发工具| 元宇宙“综艺” | AIGC工具 | 体育产业 | ... ...


您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存