分享

扩大肿瘤介入的治疗范围

 银缕一瞬 2025-04-02

以下文章来源于

智能手机包含强大且实用的软件和硬件,这些软硬件可以应用于日常微创介入手术中。智能手机应用在介入放射学(IR)中具有潜力,可以提高如活检和消融等针头的准确性。本文探讨了智能手机内置传感器在介入手术虚拟和增强现实中的应用。本文还回顾了人体工程学优势和转化障碍及局限性,并概述了智能手机在介入治疗中的潜在未来发展。




背景

智能手机行业是技术增长最快的领域之一。自1992年现代智能手机首次出现以来,技术的进步使手机的功能爆炸性增长。智能手机在医学教育、诊断和治疗决策中发挥了重要作用,这些应用程序辅助医学信息、研究、文献搜索、指南、算法、诺谟图、成像、临床决策制定,甚至手术过程。

智能手机配备了众多传感器和应用程序,这些都可以被改编或用于医疗用途。最近,智能手机在临床决策制定中的应用被分类为33%使用摄像头、29%提供指南、18%使用传感器、16%提供预测建模,以及4%其他类别[2]。由于智能手机体积小、相对实惠、多功能且无处不在,因此在医疗领域的进一步扩展、部署和验证是可以预期的。在本综述中,我们探讨了智能手机在介入治疗中的应用,特别是图像引导疗法,根据使用的智能手机传感器和智能手机辅助程序的潜在未来方向进行分类。我们将讨论智能手机的基本组件、虚拟现实应用、增强现实应用以及人工智能应用,所有这些都以介入放射学中的应用为主要焦点。


智能手机的组件和程序应用

智能手机的整体设计包括触摸屏显示器、摄像头、操作系统、网络以及许多传感器,包括加速度计、陀螺仪、接近传感器、磁力计等。智能手机可以显示质量合理的图像,可能适合某些标准程序任务,如图像引导活检或消融中的针头角度粗略引导。

摄像头

智能手机内置摄像头除了成像外,还能执行多种功能,如面部识别、文档扫描、二维码读取、空间参考或测量。这些功能使智能手机摄像头能够执行从成像设备到增强现实(AR)引导程序等一系列临床任务。因此,智能手机摄像头已被应用于许多手术中,用于程序规划、导航、成像、可视化、复合设备放置和验证(如肿瘤活检或热消融)。具体的临床应用示例包括经皮图像引导活检、内窥镜检查、喉镜检查以及CT规划中的患者定位。此外,还报道了智能手机辅助手术在骨科手术中的应用,包括全髋关节置换术[4–6]和全膝关节置换术[7]。在每个应用中,智能手机摄像头都被用来改善可视化和手术规划。

互联网

互联网和可用网络是智能手机通信的关键因素。智能手机处理单元可能没有能力在所需的实际时间框架内快速处理超过一定阈值的信息量。在这种情况下,大量数据可能需要在独立的工作站上通过互联网、云、蓝牙或网络传输进行远程处理或存储。智能手机数据处理还引入了复杂的监管、安全和隐私问题,这些问题可能因地理位置、国家法律、研究或临床用途、使用方法和意图而异。医生和患者通常通过远程医疗在互联网上进行远程通信。本综述不包括放射学诊断应用,但包括通过上传到云服务器并在智能手机上查看CT和CTA图像进行中风评估[8]。

蓝牙

蓝牙允许与附近外部硬件进行短距离通信。配对可实现单向数据传输,其中一个设备作为接收器,另一个作为发送器。这能够与工作站进行链接。

音频

可听反馈也可用于经皮手术中导航针头的调整(例如,当达到最佳角度或深度或接近关键结构时音调变化)[9]。音频也可以作为多模态人工智能模型的输入,其中通过录音机获取的音频可以转换为梅尔频谱图,该图随时间变化模拟声音频率,并与人类听到的等距感知音阶对齐,通过应用频域滤波器,这些图像可以根据程序或医疗任务进行理论分析,如确定所需麻醉水平、分析呼吸声以预测意识或镇静水平或分类程序性疼痛。梅尔频谱图用于语音识别系统,如Siri或Alexa。

传感器

智能手机有许多内置传感器。运动传感器包括加速度计、陀螺仪、重力传感器、光检测和测距传感器、磁力计和旋转矢量传感器。环境传感器包括温度、压力、光和湿度传感器。位置传感器包括方向和磁场传感器。惯性测量单元(IMU)传感器通常是陀螺仪、加速度计和磁力计的集成,以输出多个轴上的角速度、加速度和磁场[10]。本综述中,陀螺仪和加速度计是图像引导介入手术(如基于针头的活检和消融)最常用的传感器。

图片

加速度计:加速度计通过微机电系统(MEMS)测量智能手机的加速度——一种由微型机械传感器和执行器组成的系统,该系统将地震质量的速度变化转换为电路中的电容变化[11]。它在全球定位系统(GPS)跟踪和测量运动速度方面发挥着关键作用(图1)。

陀螺仪:与加速度计一样,陀螺仪也是MEMS。它测量智能手机在三个轴上的角速度以确定智能手机的方向。它通常用于导航系统或需要倾斜的智能手机游戏或照片[12]。图片

图片
图片
图片
许多临床应用使用内置测角仪,它是加速度计和陀螺仪的组合,可用于跟踪运动和计算手机的方向[5,13,14]。除了能够准确分析运动外,智能手机的紧凑性还使操作者拥有更多的移动自由度,以便更好地可视化目标解剖结构,与传统程序设备相比具有优势。事实上,一款内置摄像头和陀螺仪的智能手机被用作一种低成本、广泛可用、准确且可靠的指导设备,用于CT引导的经皮针手术[15]。开发了一款移动应用程序来促进针头角度的选择;该应用程序将计划的针头角度实时、低成本地显示在针头轴的正交方向上以及沿针头轴(沿轴和集线器)。计划角度的直接可视化提供了一种替代方案,以减少对医生认知视觉空间记忆和手眼估计及技能的依赖(图2a,b,3a,b,4a,b,5)。结合CT和智能手机引导与仅CT“步进拍摄”引导相比,在初始针头角度选择和放置方面显著更准确,导致最终定位误差更小,这表明智能手机引导可以提高针头导航和放置的准确性,与常规方法相比(图6)。最近的一项类似研究也强调了陀螺仪在针头穿刺中的益处,提高了准确性和目标命中率[16]。

在介入放射学中的应用

智能手机在介入放射学中的应用是一个相对年轻的研究领域。许多研究关注于作为准确针头定位/插入导航工具的应用,因为这是基于针头的介入治疗成功的关键步骤。因此,许多人正在探索使用虚拟和/或增强现实来绕过更大、更笨重且更昂贵的医疗设备/技术,以实现相当的准确性和效率。尽管尚未发表许多原始应用,但我们旨在回顾智能手机在IR中的最新探索,希望刺激智能手机VR和AR应用在介入治疗中的进一步发展。


虚拟现实应用

虚拟现实(VR)在手术领域的应用经历了快速增长,如教学演示、培训、治疗规划和手术导航[17–19]。VR市场是增长最快的领域之一,其全球收入预计到2024年底将超过400亿美元,这说明了其在手术和图像引导疗法中的潜在应用[20]。然而,商业模式的资金并不等于证据。VR允许用户通过系统(如头戴式设备(HMD))观察并与虚拟环境交互[21]。在外科培训中,VR HMD已被用于创建抽象的虚拟手术室(OR)进行团队培训场景[22,23]。VR还可以模拟真实的医疗器械,其中计算机控制台生成并维持力反馈。目前,大多数手术模拟都集中在手术技能的训练上,从打结到胸腔管插入到柔性内窥镜检查[23],尽管未来还有扩展的空间。也有用于教授解剖学、空间解剖关系或特定程序模拟和规划的VR系统。

任何用于介入教育或模拟的护目镜、可穿戴设备或基于工作站的应用程序也可以通过智能手机或智能平板电脑应用。与基于护目镜的VR教育相比,基于智能手机的方法可能具有成本优势,同时仍然能够减少错误、时间和辐射暴露[24]。与护目镜相比,智能手机在采用此类教育和远程应用方面可能面临更少的障碍,这归因于访问、人体工程学、校准要求和注册挑战。此外,它们还避免了体积、汗水、无菌问题、视线深度线索、网络不适、适应性头痛、电池寿命或护目镜滑动等问题。因此,应广泛鼓励介入治疗中的VR应用探索。


增强现实应用

与VR相比,AR将数字信息叠加到现实世界中,创建一个技术增强的现实,该版本通过固定[26]、移动[27,28]或可穿戴[29,30]AR设备可视化。最近发表的研究主要集中在针头定位/插入上,报告了这种特定介入治疗日益增长的需求的积极结果。实施小型且相对经济的智能手机作为AR平台可能足够准确,以消除对昂贵且笨重的医学成像设备的需求,尽管这在很大程度上取决于设备跟踪的准确性。一种常见的跟踪类型是基于视觉的,这通常通过检测被成像物品的标记或特定特征来发生。这种基于视觉的跟踪正在从基于标记的转向同时定位与映射(SLAM)技术,其中用户位置被主动跟踪,同时环境被同时映射。这是通过摄像头和惯性传感器(如加速度计和陀螺仪)实现的,它们为跟踪提供补充信息。如前所述,大量数据的处理可以在远程处理器上通过互联网数据共享执行[31]。处理器在快速程序内处理的能力尚待完全测试或了解,并可能取决于特定计算密集型任务的处理器集成和可用性。

几项研究已经证明了智能手机基AR系统在医疗程序中的潜在益处。在一项研究中,开发了一种智能手机基AR系统,以促进经皮手术中的针头轨迹规划和实时引导[32]。AR软件提供了图像分析、介入规划以及3D参考标记与术前图像之间注册的交互功能,从多个角度进行。一旦计划好,计划和优化的针头轨迹就被转移到智能手机上。在智能手机应用程序上选择所需的初始顺序目标(从可用的计划目标中选择)。摄像头视野中的3D参考标记允许连续、自动注册和治疗计划的迭代调整,随着智能手机的移动或针头的放置,智能手机显示会更新。此更新提供了实时迭代反馈,同时更新显示的虚拟轨迹和治疗计划(图7)。预分配的入口点、计划的针头轨迹、预定目标和针头深度的虚拟标记显示在手持智能手机上,并叠加到物理模拟患者上,从侧面正交和在线(沿针头轴查看)均可见。操作员使用智能手机显示器定位所选皮肤入口点,使针头与计划的AR轨迹对齐,然后推进针头(图8)。因此,操作员通过基于术前计划的即时实时反馈来推进和调整针头。这种智能手机基AR引导应用程序的使用导致AR引导针头的平均操作员插入误差比CT引导的自由手减少了78%,消除了术中CT扫描和辐射的需要,并使平均手术时间减少了66%[32]。另一种智能手机基AR系统在手机壳上集成了针头导向器。固定的针头导向器实现了真实空间与AR空间之间的连接,允许新的应用,包括在患者床边规划针头轨迹(图9)[33]。

智能手机AR还与智能眼镜基AR在系统准确性和针头放置性能方面进行了比较,用于3D打印模拟体上的经皮针介入治疗[34]。智能手机的目标叠加误差和针头叠加角度误差与HoloLens相当。然而,智能手机引导的针头放置显示出比HoloLens1更低的误差,但时间略有增加(87±17秒,71±27秒,分别为p=0.02)[34]。与常规CT引导的治疗相比,两种AR设备都降低了针放置误差。这两项研究有效地证明了智能手机基AR平台在指导经皮活检和消融方面的潜力。此外,智能手机AR在多探头复合消融方面比徒手消融具有更少的残留肿瘤和更高的效率[35](图10a,b)。智能手机AR的好处包括提高针头插入准确性、减少手术时间和降低辐射暴露。使用智能手机AR,这些好处得以实现,而无需承受基于护目镜的AR的成本、人体工程学、可及性、头痛和网络不适或其他挑战。最重要的是,智能手机AR允许经验不足的医生与专家相似的操作,实现介入治疗的标准化,可重复性和可靠性,并缩短学习曲线。

表1列出了在介入治疗中使用AR系统的智能手机应用程序,以及它们使用的主要智能手机传感器和益处。所有这些设备都使用摄像头和多个运动传感器作为导航系统。最常见的益处是AR系统允许实时数据提取和分析,这对于需要实时跟踪和针头导航的医生来说,可以转化为更准确和交互式的程序,特别是在活检和消融等需要实时跟踪和针头导航的程序中特别有用[24]。

图片

与使用锥束计算机断层扫描(CBCT)引导的透视、智能手机上的AR引导和智能眼镜上的AR引导相比,在放置针头时,手术时间和辐射量有所减少,与常规徒手操作相比也是如此。两种AR平台都显著减少了针头放置时间,同时消除了辐射暴露。在术中,辐射暴露应始终降低到合理最低水平[7,24]。任何AR平台的另一个有趣特性可能是通过消除在控制室、监视器和患者之间来回查看的需要来增强集中力或注意力。在开颅手术规划中,使用AR系统减少了医师的注意力转移次数,同时在颅骨上描绘了叠加的肿瘤[36]。

图片

虽然AR和智能手机应用在程序设置中的潜力巨大,但这种方法存在局限性。AR系统高度依赖于人体解剖学和程序器械的准确注册和跟踪系统。最近的一项研究实施了针头与智能手机的刚性固定装置,这可能是提高跟踪准确性的另一种方法,需要更少地依赖注册基准标记[37]。虽然刚性结构在骨骼、大脑或前列腺的手术或程序中注册已被证明非常成功,但由于功能运动、器官移位或通气平移导致的动态移动结构难以注册和跟踪[38],这为未来的探索开辟了另一片沃土。

图片
图片
图片
图片

智能手机人工智能

与AR类似,移动平台已被用于在医学中双向训练和应用人工智能(AI)。可泛化的AI模型和算法可以在移动设备上实施,用于各种应用,如疾病分类。在某些情况下,智能手机用于从用户那里收集信息以训练AI算法,这些算法随后也可能部署在智能手机上。例如,在皮肤病学中,使用智能手机拍摄的脸部图像被用来训练一个模型,以检测和分级痤疮(全球痤疮严重程度量表),该模型在炎性病变方面的加权平均精确度为84%,在非炎性病变方面为61%,在炎症后色素沉着方面为72%[39]。一个智能手机AI系统经过训练,可以通过直接拍摄患者眼睛的智能手机摄像头检测糖尿病视网膜病变,其敏感度超过95%[40]。由于智能手机无处不在,深度学习所需的大量数据可以快速捕获、共享和整理。无论是图像、音频频谱图、睡眠活动、生命体征还是从可穿戴设备外围获取的数据,移动平台都为AI算法的训练、设计和实施提供了多种可能性。

智能手机在医疗保健中的采用和实施面临许多限制。采纳和实施智能手机的挑战包括对其能力的犹豫或不熟悉、系统不准确、使用中的可变性、设备错误,以及监管、许可、隐私和数据传输限制。许可、知识产权挑战和非传统商业模式也可能是将智能手机应用从实验室转化为临床的障碍。智能手机稳定臂和硬件通常也不是按照医疗级别的准确性和精度制造的。

尽管本综述侧重于程序和图像引导治疗应用,如介入放射学中的基于经皮针穿刺的手术(如活检和消融),但这只是教育、诊断和患者监测应用的一小部分。随着可穿戴设备和智能手机技术的发展,未满足的临床需求可能通过智能手机增强设备导航、教育或获取信息来解决。


结论

智能手机组件技术可用于图像引导介入手术,以解决未满足的临床需求或增强或标准化现有临床实践。智能手机有可能影响标准化手术治疗,否则这些程序将依赖于介入医生对解剖的认知,这些任务需要良好的手眼协调能力。智能手机AI、AR和VR对培训计划和基于经皮穿刺的手术的影响是显而易见的,但值得关注,因为任何基于护目镜的AR或VR的介入手术都可适应智能手机。智能手机AR可以在临床前模型中提供与临床中其他导航技术相似的准确引导。智能手机在医疗保健中实施的障碍包括对其能力的犹豫或不熟悉、系统缺陷、用户可变性以及监管、隐私和数据传输限制。未来的研究可能侧重于临床中的实际准确性、硬件和软件集成以及穿刺针导向器,以及适应特定商业模式和工作流程。

已经确定,数据流和程序工作流程可能通过智能手机在手术期间收集、呈现或使用信息来促进或标准化治疗。智能手机(因此也包括智能平板)在需要经皮穿刺的介入手术中是易于访问、低成本且准确的,并值得进一步研究其在临床实践中的障碍。

参考文献:Smartphone Technology for Applications in Image-Guided Minimally Invasive Interventional Procedures


END
 






医科大学

201335医科大学1720198140

TIPS

穿尿

 10IMIA

图片






图片

 

   

     医科大学C,,,IMIA,,,CSCO,,,,稿

      主持国自然2项,海南省重点研发 2 项,省自然 1 项等国家省部级课题共 8 项。授权国家发明专利 2 项,累计科研经费超300万。参20222020 2020 

     30TIPS//穿+++

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多