元宇宙时代正在全面开启,混合现实技术让现实世界和虚拟世界的融合更为紧密。一方面,个人创作者希望能够更快提升虚实融合世界的创作效率;另一方面,高效便捷的内容创建也为千行百业带来更丰富的想象力。如今,“一扫建模、还原现实场景环境”等构想,正在不断地走向现实。
近日,燧光科技开发的国内首款全栈式虚实融合开发工具——醒空MRGC系统正式上线。燧光科技创始人兼CEO贺杰在接受《中国电子报》记者专访时表示:“醒空MRGC系统‘采录编播一体化’帮助不同行业便捷打造三维化、虚实融合沉浸式内容,燧光助力行业筑牢下一代虚实融合数字化底座。”
用户创造新世界只需“四步”
“混合现实需求正面临爆发。XR的未来,更重要的是三维化虚实融合交互式内容,更需要‘采录编播’一体化。”贺杰表示。
据悉,醒空MRGC系统为用户提供一站式的虚实融合采集、创作、分发能力,是国内首款实现“采、录、编、播”一体化的MRGC创作工具,可实现“四步便捷创作内容”。该系统由一个数据底座与五大平台构成,数据底座内含资源库、逻辑库、训练数据和头显应用数据,五大平台为编辑平台、实训平台、硬件平台、分析观摩平台和管理平台。
编辑平台是整个系统的重要部分。创作者可通过场景编辑、实体编辑、行为编辑、目标和评分编辑四步完成虚实融合的数字内容创建。用户借助醒空MRGC系统,可根据自身需要,对布景、实体、行为等内容进行构建,独立创作虚实融合内容。素材采集、内容创作、内容分发的一站式操作,大幅降低创作者在内容开发方面的门槛。
在醒空MRGC编辑器内,用户可新建章节,利用内置的海量美术资源和3D模型对场景进行细节设计和材质渲染,并支持美术资源库、API和本地资源库的手动导入,也可接入扫描重建一体机重建的实体模型,增加场景真实感。同时,该编辑器也支持行为编辑,用户可通过AI编辑、逻辑元编辑与状态机为实体导入行动逻辑,还可通过配套的扫描重建设备录制并还原真实的动作。在目标和评分编辑方面,醒空支持用户从人物目标、逻辑体表现,以及全局表现多维度设立评价体系,输出客观评分数据。
“通俗一点儿说,醒空MRGC系统是把混合现实内容的采集和录制的工具给到客户,让客户拥有更多的混合现实内容的创作灵活度。”贺杰向记者表示,燧光通过不断完善系统中的功能模块,满足用户个性化需求,助力用户实现“开箱即用,60秒进入使用”。
值得注意的是,除传统的单设备使用外,通过醒空MRGC系统可直接形成多用户,甚至一两百名用户共同使用。参与者皆可通过直播系统实时生成多路虚实融合画面观看的使用情况。贺杰表示,未来,燧光科技将加速实现《虚拟现实与行业应用融合发展行动计划(2022—2026年)》中提出的“到2026年,三维化、虚实融合沉浸影音关键技术重点突破”这一发展目标。
推进虚实融合软硬件闭环
在一些场景的数字化感知、设计、重建过程中,混合现实技术还暂未形成软硬件闭环。为解决这一痛点,燧光科技一体化开发了Rhino X2旗舰级混合现实交互终端,架起连接虚拟数字世界和真实物理世界的桥梁,作为XR行业的革命性的创作工具,赋能全行业实现降本增效。
据悉,Rhino X2是目前业内集成度最高的混合现实交互终端,聚合了SLAM大空间定位、红外X-Tag定位、GPS/北斗双星定位、虚实融合交互、拍摄空间视频、全息直播/录播等功能。7枚光学传感器可保证空间交互的效果,并对空间视频的拍摄提供支持。此外,Rhino X2还支持手势识别,并兼容VR内容,拓宽了更多应用场景。相较前代,Rhino X2的技术加码也亮点十足:7nm计算平台和FPGA硬件加速协处理器双芯片,可保证应用流畅运行与跟踪定位的准确。同时,Rhino X2还支持4档FFR,可智能降低GPU负载,并可利用ASW/APPSW技术,令大多数应用实现满帧运行。
通过Rhino X2,用户可直观体验虚实融合的数字化内容并与之交互,还可以进行三维环境扫描建模等操作,与醒空系统灵活接入。贺杰在接受媒体采访时曾表示,作为一个To B、To G的行业型设备,Rhino X2更加强调功能性和场景适用度,即可靠性要求。这意味着设备系统在复杂多变的环境之下仍然要保持稳定性和一致性。
贺杰曾表示,基于穿戴者要进行摸爬滚打等动作的要求,燧光科技完成了闭环的创新,醒空MRGC加入了采用视觉加惯性的混合动捕系统,实现从内到外,从环境、物体到人物之间的精准捕捉;设备在严寒或高热的极端环境下仍能正常工作,其可靠性温度范围为-30℃到+80℃。另外,在循环冲击下保证7颗摄像头的一致性,需要精度很高的虚实融合,这对技术、生产工艺和产品测试精准度都有极高的要求。
除Rhino X2外,手柄、扳手等安装工具,车辆驾驶装备模拟器,环境扫描设备、动捕手环、摄像头等设备,都以各种组合方式灵活接入醒空MRGC系统。记者了解到,截至目前,燧光科技已经在硬件领域取得了不错的市场表现,AR整机出货量超过53万套,VR交互系统出货量超过60万件。
沉浸式数字生活场景处处显新意
据燧光科技相关负责人介绍,不仅在C端用户,在文旅、教育和治安警务方面,燧光科技也收到了诸多好的反馈。
在文旅应用方面,燧光科技利用醒空MRGC为地标性景点打造了混合现实观景台,成为了景点与人文链接的桥梁。游客戴上头显就能看到虚拟元素与实景完美融合,还能与景物附近的虚拟内容进行交互,了解景物的相关信息,既改变了传统文旅的观光方式,也满足了游玩性和趣味性;在教育培训体验方面,醒空MRGC系统可以建设系统基地,虚拟化教学设备,将抽象难懂的知识具象化、数字化。
此前,工业和信息化部等五部门印发的《元宇宙产业创新发展三年行动计划(2023-2025年)》指出,建设文旅元宇宙,围绕文化场馆、旅游景区和街区、节事活动等应用场景,打造数字演艺、“云旅游”等新业态,打造数智文旅沉浸式体验空间。推进构建虚拟教室、虚拟实验室等教育教学环境,鼓励通过平台共享虚拟仿真实验实训资源,扩大优质教育资源覆盖面。
贺杰表示,教育和文旅市场是燧光科技的重要应用市场。据悉,醒空MR全息教学资源创作与协同平台轻松实现“老师走一圈,环境模型已建好;老师在工位实操一次,MR三维视频融合教学资源自动生成”,打造线上线下混合式课堂,实现高质量全息数字化教学。
此外,在执法、警务的数字化训练方面,用户可基于醒空MRGC“采录编播一体化”的特性,轻松地进行无代码课程创作,让用户掌握定制化开发的能力,灵活地按需自定义训练内容,大幅减少组训、情显成本,规范警务人员的执法流程。记者了解到,截至目前,燧光科技的场景应用多点开花:教育应用案例超过200个,已经基本覆盖全部17个专业大类;文旅应用落地全国100多个地标景点与展馆。
“未来,燧光科技将逐渐把开发能力工具化,交付到集成商进行二次开发,相当于朝着产业链更上游延伸。”贺杰表示。燧光科技也将基于醒空MRGC系统赋能各个行业的专业用户,帮助他们轻松地独立制作适配自身行业属性的数字化训练内容,实现降本增效。