(中国,上海)——2023年5月25日—28日,以索尼黑科技引领次世代的娱乐创作及欣赏体验为主题,索尼中国研究院(Research & Development Center China,简称RDC)携旗下多项技术概念验证结合索尼人气娱乐IP内容的体验项目亮相Sony Expo 2023,包括结合3D内容生成和动作捕捉技术的“虚拟舞蹈实验室”;可取代人力实现机械臂自动拍摄的“智能机械摄影室”;以触觉反馈技术助力演唱会等欣赏体验的“沉浸式触觉剧场”。这是索尼中国研究院在华领衔的首次出展,旨在对外沟通和交流索尼在华技术研发举措及阶段性成果,进一步贴近本土创意娱乐社群,携手更多优秀合作伙伴共同进行新时代下新应用场景的探索与实践。
索尼中国研究院Sony Expo?2023展台全貌
在5月24日的展前媒体发布会上,索尼(中国)有限公司副总裁,索尼中国研究院院长竹中幹雄表示:“索尼中国研究院的使命是通过开展对前端技术的探索和应用, 为索尼业务和中国的社会发展做出贡献。我们于2005年在北京设立了第一个实验室,最近几年又设立了深圳和上海实验室,持续加大在中国的研发投入。中国是一个高速发展和充满无限可能性的市场,并且人才济济,在中国做研发能够更贴近本土的实际需求、加快研发成果的概念验证,从而推动实际落地。从中短期来看,我们会特别聚焦在中国的娱乐(元宇宙)领域,期待通过索尼的人工智能(AI)、通信、传感、机器人、3D内容制作等前端技术,结合索尼旗下影视、音乐、动画、游戏等丰富的娱乐内容,打造更“贴近人,感动人”的娱乐内容创作和欣赏解决方案。”
索尼中国副总裁、索尼中国研究院院长竹中先生致辞
本次Sony Expo 2023索尼中国研究院以给创作者提供更多创作可能性和给用户提供多维娱乐体验为目标带来了三个主题体验项目,每一个体验项目都充分展示了索尼关键技术与其娱乐内容的精彩融合与协同。其展台的体验内容和空间展示由索尼中国设计中心统筹设计开发,整个展台是索尼设计理念,前端技术,娱乐IP的一次融合和展示,是索尼对未来娱乐内容创作和体验的思考成果。
索尼中国研究院Sony Expo?2023展台总览
走进展台入口,首先映入眼帘的就是“虚拟舞蹈实验室”体验区,参观者可以先进入绿幕拍摄区,拍下自己的真实三维形象,然后佩戴索尼的轻量级动作捕捉设备,跟着索尼大屏电视上的RAYNOS-chan卡通人物形象简单舞动,记录下自己的动作数据,经过索尼的系统生成加工后,最后就可以在索尼的空间现实显示屏上裸眼欣赏到自己的三维形象在3D空间中起舞。该项技术目前已经于索尼在华的首个黑彩晶虚拟制作影棚开始了概念验证实验,将有望帮助内容创作者甚至普通用户以更轻量级、更可及的方式创造虚拟3D内容,打破真实和虚拟的界限,将现实真实世界映射到元宇宙中,实现“人人加入元宇宙,人人创造元宇宙”的畅想。
“虚拟舞蹈实验室”体验区
全场最大的一个体验区就是?“智能机械摄影室”,参观者可以在一个由索尼虚拟制作技术打造出的《尼尔:机械纪元》游戏场景中近距离接触游戏主角尤尔哈B型二号(YoRHa No.2 Type B)。参观者可以选择心仪的游戏关卡背景,拍摄机器人可以自动追踪并记录下参观者与尤尔哈的影像并免费下载领取电子照片留念。拍摄机器人可智能化的完成追踪、对焦、构图、拍摄的功能,提供稳定的拍摄质量,极大节省人力。未来,索尼中国研究院还将进一步在该概念验证中加入可实时移动的中小屏背景,打造更加轻量级,小面积空间可实现的虚拟制作解决方案。
“智能机械摄影室”体验区
最后来到?“沉浸式触觉剧场”,参观者可以站上特制的地板区域,观看电视中索尼音乐旗下艺人LiSA演唱会的精彩内容。地板上搭载了索尼的触觉反馈技术,参观者可以与LiSA的歌声同频共振,通过不同波形的震动效果感受演唱会中的高潮起伏,实现360音频,视频,触感多维一体的沉浸式娱乐体验。目前,触觉反馈技术已经应用于索尼的PlayStation 5游戏机的DualSense手柄、索尼Xperia智能手机的部分型号中,索尼中国研究院对该技术的应用开发则主要面向行业应用层面,尤其是在大型娱乐、体验型设施的应用,提供大型空间的沉浸式娱乐解决方案,现在已与国内部分合作伙伴在合作洽谈中。
“沉浸式触觉剧场”体验区
索尼中国研究院还将于Sony Expo 2023现场举办两场合作伙伴技术论坛,竹中先生表示:“索尼的企业宗旨是‘用创意和科技的力量感动世界’,多元化的业务是我们独特的优势,而技术研发创新是根本的基石。立足长远,索尼中国研究院关注的领域将更为广泛,如可持续发展等,我们会进一步开放对外交流,强化中国本土的产学研合作,以期更加融入和贡献于中国的产业升级和社会发展。”