与微软HoloLens相比,Magic Leap One的定位似乎更加广泛,尤其是Magic Leap所提出的Magicverse新空间互联网概念,涉及的远不仅是娱乐、游戏场景,还涉及社交、健康医疗、能源和水力、交通等与我们生活息息相关的多个层面。
前不久,Magic Leap曾宣布正在与Brainlab合作,研发用于手术、诊疗、康复等场景的AR应用,并且介绍了与SyncThink、XRHealth、Dan Marino Foundation和斯坦福儿童医院正在合作进行的一些试点项目。
据了解,Dan Marino Foundation曾利用Magic Leap One开发了一款名为VITA的虚拟面试练习系统,旨在通过空间计算功能来帮助自闭症等发育性残疾患者,让他们克服在面试等职业场景中可能会遇到的困难。它的特点是,在利用AR为患者模拟情景的同时,还通过AI识别注视点、语言模式和反应时间,为患者生成实时反馈,提供对学习计划的自适应调整。
而斯坦福儿童医院则将Magic Leap One用于医疗教学,开发了一款名为CHARM的AR应用。据悉,CHARM的特点是定制性强,可简化教学模拟的配置,取代传统教学所使用的的假体等昂贵医疗训练设施。同时,CHARM支持多人交互,老师与学生在同一环境下进行授课。
另外,Magic Leap还与SyncThink合作,将AR头显的眼球追踪功能用于诊疗、脑健康分析和远程诊疗。而与XRHealth的合作,则是将其ARHealth平台与Magic Leap One AR头显结合,将AR空间计算用于康复、认知训练、心理评估和缓解疼痛等场景。
近期,外媒VatorNews采访到Magic Leap医疗部门副总裁Jennifer Esposito,希望进一步了解上述AR医疗合作项目,以及Magic Leap计划如何用技术改变医疗。据悉,Esposito在加入Magic Leap之前,曾在通用电气医疗集团就职13年以上,还曾在Intel担任4年多健康与生命科学部门总经理。
VatorNews:你是今年1月加入Magic Leap的,请透露一下加入的理由,是什么吸引你来到这里?
Jennifer Esposito:在我加入Magic Leap之前,其实他们的团队研究医疗业务已经有一段时间了,尤其是CEO Rony Abovitz来自医疗设备背景,因此医疗也是这家公司的一部分。加入一个已经从事AR医疗研究的团队,是对于我的吸引力之一,我希望在这里帮助医疗应用的进一步开发,以及构建Magic Leap平台在医疗领域的生态。
Magic Leap团队致力于将AR用于多种医疗场景,不管是在医院、诊所还是用户家里。AR既可以帮助医生,也可以帮助病人,出于对它的兴趣我选择加入Magic Leap。
VN:你加入Magic Leap后学到了什么?空间计算曾为你带来哪些惊喜?
JE:有趣的是,空间计算与AI、物联网、5G等技术几乎是同一时期兴起,空间计算可以说是5G的一个重要应用,此外如果将空间计算与AI、物联网结合,将有可能实现我们已经谈论很多年,但一直没能真正实现的应用场景。
我们认为,空间计算将会成为一个全新的计算平台,它将结合社交技术和全新的计算方式,将数字世界与物理世界紧密结合。
VN:你认为空间计算将如何改变医疗?可否深入讲解一下你所说的一些应用场景?
JE:先拿医院来讲,我们去年就曾宣布与做医疗导航相关技术的BrainLab达成合作,一起开发一个叫做“软件开发框架”的平台。这个平台可以让生态内的其他医疗设备公司开发Magic Leap应用,还能利用我们将与BrainLab一同开发的新工具和功能。
这样做的目的是,希望利用空间计算来优化或加强传统手术方式,因此我们将推出的第一款产品将着重于术前规划。今年底,你会看到我们推出将平面术前规划变成3D形式的工具,它将实现以前无法做到的一些协作方式。这个新的技术目前还在初期阶段,它将着重于3D空间可视化,以及与不同类型数据的结合,让复杂的数据也能更容易理解。将可视化数据放在3D空间中,你将能够通过移动来对其进行浏览,还能直接进行删除等操作。
未来,我们还将与BrainLab继续合作开发其他应用,一步一步实现未来真正的数字手术室。
VN:Magic Leap还曾与XRHealth和SyncThink合作,可以谈一谈吗?
JE:SyncThink是一家开发多种生物标记相关技术的公司,我们合作开发的应用目前正在临床验证阶段,不过未来有望将通过Magic Leap设备上的多种传感器结合来诊断病人。SyncThink在识别脑震荡等神经心理学症状上有许多经验,他们可以将已有的病症测验转化到Magic Leap平台上。
XRHealth目前已经有多种用于不同类型疗法的解决方案,也是一家在医疗解决方案上有很多年经验的公司。就像与BrainLab和SyncThink的合作那样,Magic Leap希望构建一个相对开放的生态环境,为传统医疗公司提供多种不同的工具,加速他们技术与Magic Leap的结合。
VN:你认为空间计算还有多久会在医疗领域普及?
JE:目前还在早期阶段,不过我们希望通过为开发者提供有效、简便的工具,来帮助加速这些应用场景的实践,希望在未来2到5年左右让它得到普及。
VN:你认为哪些医疗科技拥有更大未来潜力?
JE:如上面所说,空间计算、AI、物联网和5G网络的结合,将会支持一些未来的潜在场景。比如Intel工作的时候,我们曾常常讨论远程医疗、虚拟疗法等,在那之后的4或5年后,这些场景依然没有完全实现。而我之前提到的那些技术,将有望让远程医疗等逐渐成为现实,不过这需要的不仅是穿戴式设备,或者5G网络,而是所有技术结合在一起。
VN:如果远程医疗经过许多年才开始走向主流,那么你认为空间计算是否将需要更少的时间,因为远程医疗等场景已经存在?
JE:这些场景将会是空间计算走向主流的关键,不过问题在于,这些技术什么时候能够真正融合。在开始讨论远程医疗潜力的时候,我们也曾讨论过物联网,之后又看到了穿戴式AR头显问世。总之,随着技术不断进步,以前曾经畅想过的场景才能够成为现实。
VN:你认为空间计算需要多久才能在医疗领域成为主流?
JE:我认为接下来很快将看到术前规划、数据可视化等有趣的应用,它们将逐渐变得越来越复杂,并且在未来2或5年里与临床护理越来越集成。
VN:在那之后呢?你可以幻想一下10年后的医疗领域吗?
JE:未来,当空间计算与5G结合,我们希望Magicverse的概念能够实现,让我们能够创作真实地点和空间的数字孪生。比如,你将看见数字医院或者手术室,或者能够通过可视化来了解数字空间的运行原理,它甚至还能优化工作流程,协助医生工作等等。
总体来讲,空间计算能够让更多人享受到医疗,因为你将不会再收到地理位置限制。不管在世界哪个角落的专家,都能够聚在数字世界中,商讨复杂的临床案例。或者,患者也更容易找到合适的专家,即使专家在距离你很远的地方也没问题。
VN:Magic Leap对于医疗领域的最终目标是什么?你认为怎样才算是成功?
JE:我希望看到一个健全的空间计算开发生态,也希望看到空间计算与5G等技术相结合,如果这些在接下来2或3年里实现,在我看来是一种成功。
VN:还有什么希望向读者传达的吗?
JE:希望越来越多的开发者、合作者和解决方案供应商能够利用Magic Leap的空间计算平台,并结合5G、物联网等其他技术,这是目前的重点之一。另一方面,还想强调未来的Magicverse将有望让更多人享受到合适的医疗,打破地理位置所带来的局限。
电科技(www.diankeji.com)是一家专注于全球TMT行业的领先资讯媒体。
作为今日头条青云计划、百家号百+计划获得者,2019百度数码年度作者、百家号科技领域最具人气作者、2019搜狗科技文化作者、2021百家号季度影响力创作者,曾荣获2013搜狐最佳行业媒体人、2015中国新媒体创业大赛北京赛季军、 2015年度光芒体验大奖、2015中国新媒体创业大赛总决赛季军、2018百度动态年度实力红人等诸多大奖。
投稿、商务合作请联络微信公众号
声明:本站原创文章文字版权归电科技所有,转载务必注明作者和出处;本站转载文章仅仅代表原作者观点,不代表电科技立场,图文版权归原作者所有。如有侵权,请联系我们删除。