编者按
“一个创新的城市应有几个‘核爆点’,这里是创新思想的源泉、新赛道的风口点,是全球各类最好创新资源的汇聚区。”上海建设全球科创中心,必须着眼从0到1、从1到10的创新全过程,为城市发展带来“核聚变”效应。
“从0到1”,创新难;“1到10”,创业艰。而在张江,偏偏就有一批不畏艰难者。他们是初创企业、跨国公司、研发机构、孵化器......他们中有创业者、科学家、企业家、“打工人”......“从0到10”,他们各自默默耕耘,“携手”共织生态,在张江科学城书写着一个又一个全过程创新的精彩故事。我们专门开辟“寻找张江创新‘核爆点’”栏目,戴上创新“潜望镜”,寻找张江产业发展新赛道上那些有潜力的“核爆点”。
叠境数字科技数字人
在无声世界里,首款手语“ChatGPT”将在张江科学城诞生!依托上海科技大学孵化的高科技企业,叠境数字科技(上海)有限公司近日传出好消息:其正在研发冲刺中的通用型手语翻译数字人,在完成优化后有望于明年发布。
让元宇宙创造“幸福感”
“叠境”,这个看起来就略有“元宇宙”味道的企业,正是要“ 创造每个人都可以拥有的元宇宙”。20多年前,在第一遍看电影《黑客帝国》的时候,现任叠境CEO的张朝华就明白,“这部电影所描述的,是正逐步走向现实的元宇宙。” “叠境”意味着一个把虚拟和现实重叠起来的环境,亦即把一切实物数字化,完美诠释了让平行世界与数字未来的高度互通。“而这,正是我们接下来的二十年里,要的事情!”
从计算机互联,到移动互联,再到万物互联,深耕网络行业20年的张朝华,2020年加入叠境数字。作为上海科技大学孵化的首个高新技术企业,当时的叠境只有4岁,却手握光场技术、智能视觉、三维重建技术核心技术,并自主研发了行业领先的数字孪生城市、智能数字人、虚拟会展、自由视点等产品。
在去年的世界人工智能大会上,叠境数字带来的“上帝视角”,展示了硬核创新的“爆发力”—— 用三维的方式1:1数字化还原张江科学城中区的交通道口场景,信号延迟1秒以内。这让城市交通管理运营人员,坐在指挥大厅就可拥有“上帝视角”:交通参与要素全标定、 车流轨迹全还原、交通事件可追溯。“这意味着,不需要额外的道路交通投入,仅靠数字孪生技术就可以大幅度减少拥堵时间,完成对道路标识和交通信号的极大优化。”
今年以张江人工智能和元宇宙数链的产业集群支撑,携手合作伙伴共同打造了数字孪生“未来之城”的AI 2.0新范式,通过研发普惠、开放、共赢的张江科学城数字孪生底座,形成面向未来生活、未来交通、未来医疗、未来金融、未来制造等五大数字化应用场景。构建城市云原生底座技术,二三维GIS图层弹性加载,多用户多应用弹性扩展,重新定义城市级数字孪生新范式。
用元宇宙技术,为老百姓创造一个有幸福感的城市体验;让每一个C端的用户都用得上、用得起元宇宙。正是“叠境”每一项创新的初衷。“数字孪生底座未来会成为很多应用的基础应用平台,如果低成本渲染技术可以突破,数字孪生平台大概率会成为一个三维地图的服务,无论室内还是室外的场景都能栩栩如生、低成本地呈现在人们眼前,真正成为老百姓生活工作中不可或缺的部分。”张朝华说。
叠境数字科技数字孪生
未来科技“接地气”
未来科技不未来,来自张江接地气的创新环境。“张江上班高峰会堵车,但下班就不这么拥挤,因为这里集聚了各类高新技术行业,企业也处于不同发展阶段,充满着为未来而奋斗的气息。”成立仅仅七年,叠境数字就拥有了一百多项自主研发光场视觉及数字孪生知识产权。“这得益于张江提供了非常优秀的创新生态,让科研人员去探索去试验,激发出更多的创新活力。”张朝华说。
2016年起步时,叠境数字驻扎在上科大附近的一座办公楼里,当时只有20多个员工。七年过去,企业办公面积扩大了4倍,员工也达到了近100人,张江高科技园区的孵化器、国有资本都给予了这支着眼未来的初创团队,以最大的现实支持,帮助其在光场技术和智能视觉研究等尖端领域的领先技术,加速落地。截至目前,虚实融合数字孪生系统、虚拟智能数字人、自由视点等原本尚在未来时的技术产品,已成功亮相于第十五届武术锦标赛、CBA常规赛、北京冬奥会等相关大型赛事。
例如,北京冬奥会上,冰壶、速度滑冰两项赛事的转播采用了自由视角技术,还配有“时间凝结”特效,让观众不再局限于从一个视角观看比赛,而是能从多角度细看精彩瞬间的定格画面。提供这些先进技术的正是叠境数字。叠境数字科技专为冰壶比赛设计了相应的自由视角采集系统,部署48套4K超高清多视角相机系统在赛场周围。该方案充分利用了其在光场技术、计算机视觉、人工智能等领域的技术实力,将传统长时间的“子弹时间”特效生成速度,提高到最快在5秒内就可以生成最终效果。
为了达到更好的视觉效果,叠境数字科技还在“子弹时间”特效制作中,实现了对感兴趣区域的放大缩小、改变聚焦点适应不同运动区域以及虚拟视角生成等功能,大大增强了视觉效果。最终,为观众带来可以近距离观看运动员们掷壶精彩瞬间的新体验,也成为国际上第一家将自由视角直播技术应用在冰壶赛场的团队。
目前,叠境数字正与上海科技大学联合研发一套首款手语界“ChatGPT”—— 通用型手语翻译数字人。“这款数字人是我们和上科大一起基于自主研发的大语言模型去开发的。现在聋哑人去看病,从预诊到挂号、问诊、检查,直至付费和配药取药,都需要一名全职的志愿者陪同。手语数字人的出现,既解决了志愿者人手不足的问题,也让聋哑人就医更方便。”张朝华说。