手术能模拟、眼镜变“”,上海元宇宙产业走向可感可用
发布时间:2025-12-17 11:30 浏览量:2
在红色教育中,智能头显让历史“活”了起来;在医学培训中,虚实融合系统让医生在安全环境中反复锤炼手术技艺;在消费场景中,创意与信息即时叠加于现实世界,智能眼镜成为设计师的“空间画布”。上海元宇宙技术正从概念走向产业,开创前沿创新应用,虚实融合的元宇宙生态加速成形。
原汁原味保留教育内容
戴上智能头显,上海工人武装起义的历史现场在眼前展开。点亮火种、狙击打靶、拼接铁轨、启动列车,得益于自然的手势识别与敏锐的眼动追踪技术,体验者以第一视角投身那段热血岁月,在真实可感的互动体验中实现沉浸式红色教育。
2024年6月,上海商学院与中共一大纪念馆共建新媒体与元宇宙实验室,开展XR核心技术研究,以数字技术赋能红色文化资源。上海商学院商务信息学院党总支书记宋晓光介绍,实验室独立开发了以上海工人阶级第三次武装起义为背景的MR大空间场景《红色黎明》,以空间计算替代传统LBE(基于位置的娱乐)需要贴地标的限制,让互动体验更加自然流畅。
MR大空间场景《红色黎明》。
未来,实验室的主要研究目标是专注元宇宙在高校各教学领域的应用,深度融合生成式人工智能与元宇宙,让学生能够快速搭建元宇宙场景,最终目标是各类学科都可以开发自己的元宇宙应用。
之所以设立这样的目标,是因为在教育中,传统VR内容开发面临的关键瓶颈是,教师需要将教学设计转译给技术人员,这一过程存在“翻译损耗”。技术人员难以充分理解教学精髓,导致最终产品往往无法精准还原教师的教学意图与核心知识点。
宋晓光表示,AI的介入改变了元宇宙开发范式,它能够精准理解教学点,“原汁原味”地转化为VR交互逻辑,保持教学设计的完整性与准确性,让技术真正服务于教学本身。
虚实结合赋能医学培训
成立于2016年的空岛信息科技(上海)有限公司开发虚实结合的医学教育培训,创始人闵世豪介绍,团队构建了七大虚实结合的专科系统,覆盖心脑血管介入、眼科白内障切除、麻醉科困难气道管理、超声科、执业医师考核、急救等,实现医学专科临床模拟和AI技术临床应用,以元宇宙临床和AI科研支持,为全国30家重点三甲医院提供临床手术术前规划和专科临床教学系统,提高医疗培训效率,降低培训成本。
在外科手术培训领域,空岛信息科技构建面向临床技能训练的VR+AI外科手术模拟培训与智能分析评估,通过虚实结合模式构建沉浸式手术模拟,同时利用AI技术对操作视频深度识别与分析,输出客观量化评分,突破传统人工评价的主观局限。该技术已应用于腔镜手术培训,学员可以上传真实内镜下的手术视频,系统自动识别手术器械与解剖点位,实现对操作视频的自动拆解及工作流智能识别,辅助外科医师高效分析手术表现。
眼科白内障切除仿真模拟教学系统。
“我们会根据临床需求和临床特点优化设备,和医生共同打磨。”闵世豪表示,团队为困难气道开发的可视化培训系统,直面临床中张口困难、食道反流等10种复杂又棘手的气道场景,通过构建高度逼真的虚拟气道场景,搭配实体模拟操作器械,让学员深度演练困难气道管理的操作细节,反复练习12项常用气道管理技能。
“无论是AI、VR,还是未来的数字病人,本质都是工具,关键在于解决真实场景问题,帮助临床诊疗。”回顾虚实结合的医学培训系统发展历程,闵世豪介绍,最初始于仅能演示的动画,为了实现交互而引入虚拟仿真与VR,操作手感与肌肉记忆的缺失要求采用力反馈技术,这是一个需求驱动的渐进过程。未来,行业的发展方向是构建从微观细胞到宏观结构的高度个性化数字孪生人体,使临床训练无限趋近于真实。海量数字孪生人体有望助力医疗机器人训练,应对复杂临床情况。
欲做智能眼镜时代的“抖音”
上海凝丰智能科技有限公司展厅内展出了多种类、多功能的消费级智能眼镜产品。凝丰智能与国内十多家智能眼镜企业深度合作,其开发的低门槛快速创作的智能体平台“混空Studio Agent”专用于制作元宇宙内容。即便是不会编程的用户,也可以“拖拉拽”式搭建元宇宙场景,完成制作后一键分发到不同智能终端实现元宇宙体验。用凝丰智能创始人兼CEO何飞翔的话来说,就是打造智能眼镜时代的“抖音”。
快速搭建元宇宙场景。
当前,商业、文旅是元宇宙重要应用场景之一。凝丰智能将文商旅资源以元宇宙形式融合创新,将静态景观转化为“可玩、可探、可分享”的动态空间,适配国内外主流智能眼镜设备,以沉浸式时空体验推动文娱产业升级,延长游客停留时间。
在博物馆和艺术策展场景中,游客进入展馆后租赁AR眼镜,就可以体验元宇宙文旅导览或虚实结合的互动体验。在蓬莱仙洞景区,凝丰智能依托元宇宙与AR大空间定位识别技术,开发了“AR敲响天地时钟”与“放飞虚拟孔明灯”两大核心互动场景,突破了传统溶洞游览的单一模式。春节期间,凝丰智能还将在合肥上线“泸州灯会”元宇宙体验。
“过去几年,一个具备虚实融合与空间交互的场景常被直接称为元宇宙。但当时的底层技术和产业链工艺等环节并不成熟,导致始终缺乏可规模落地的应用场景,元宇宙难以普及。”何飞翔表示,AI破解了元宇宙落地的痛点之一,AI与AR的深度融合,生产效率有了革命性的提升,制作成本大幅降低,“零基础”也能开发元宇宙应用。“我们已经把价格从过去的动辄10万、20万定制开发费用降到千元以内。”
何飞翔预测,随着全彩显示与空间计算技术的进步、算力和续航能力的持续提升,未来将能够开发出更多有趣的应用,智能眼镜将呈现更多精彩画面,刺激消费者的使用频次,带动智能眼镜销量。“在未来的科学技术发展趋势中,唯一能取代智能手机成为下一个通用计算入口的智能单品,一定是智能眼镜。全彩显示,融合AI,眼镜的称呼不再区分AI、XR等任何技术形态。”