0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

通过NVIDIA Clara全息扫描平台使CDI可视化

星星科技指导员 来源:NVIDIA 作者:Vanessa Braunstein 2022-04-06 15:49 次阅读

RSNA 2021 ,有专门的超声波成像跟踪,这是一种经济高效的方法,可以在不暴露于辐射或不需要注射和手术的情况下观察患者体内的情况。

超声成像通常由训练有素的超声学家完成,需要特殊的专业知识来解释。探头是一个小型传感器,既可以将声波传输到人体内,也可以记录回响的声波。它被放置在皮肤上,当它移动时,波从你的血细胞、器官和其他身体部位反弹,然后回到设备。然后,计算机将所有的声波转换成运动图像,你可以在屏幕上看到它们。

加拿大滑铁卢大学的 LITMUS 组(医学超声创新技术实验室)正在努力使超声彩色多普勒成像( CDI )更容易可视化。他们使用了 NVIDIA Clara 全息扫描平台,包括 NVIDIA Clara AGX 开发工具包 和 NVIDIA Clara 全息扫描 SDK,以及前端 us4us ,以消除混叠瑕疵并将帧速率提高 12 倍 – 从 2 fps 增加到 30 fps 。

Clara Holoscan 是一个 AI 平台,具有强大的深度学习计算能力,能够以高帧速率运行模型。 Clara Holoscan SDK 旨在帮助创建人工智能管道,用于处理超声、视频和其他成像应用的实时医疗数据流。

Clara AGX 开发工具包结合了由 NVIDIA AGX Xavier SoC 控制的 NVIDIA RTX 6000 GPU电源,外部连接由两个 PCIe Gen4 x 8 插槽和一个带有 100 GbE 端口的 NVIDIA ConnectX-6 SmartNIC 提供。

poYBAGJNRg2AJCd9AADmwO8ViCo456.png

图 1 Clara AGX 开发工具包和 us4us 前端上抗混叠 CDI 管道概述。

彩色多普勒成像

彩色多普勒成像( CDI )是一种观察动脉和静脉血流的无创方法。它被用来识别可能导致致命临床后果(如中风或心脏病发作)的动脉阻塞、血凝块或狭窄。这些阻塞可发生在身体的各种动脉中,并显著改变血液流动的特性。 CDI 可以捕获流量变化,并用于疾病状况的识别和监测。 CDI 也可用于检测动脉瘤,在动脉瘤中,肿胀的动脉壁也会影响血流。

图 2 显示了从颈动脉模型获得的典型 CDI 序列,其中血流从图像左侧进入,然后分支到上下分支。动脉中的流速以蓝色或红色阴影显示,这取决于其相对于探头的方向。周围的灰度图像显示了组织结构。 CDI 序列还显示了血流动力学在整个心动周期(通常不到一秒钟)中的变化。

typical-cdi-sequence-artery-bifurcation-model.gif

图 2 动脉分叉模型上的典型 CDI 序列

CDI 中的混叠问题

CDI 中一个反复出现的问题是存在所谓的阻碍血流可视化的 aliasing artifacts 。当血流超过 CDI 系统可测量的最大流速时,会出现混叠伪影。

例如,图 3 显示,上支路中的流速很快 ,超过了色标上的最大可测量流速( 25 cm / s )。因此,为该区域选择的颜色是从色标的另一端拾取的,并错误地指示流向相反的方向。最大可测量速度源于潜在的系统限制和成像考虑 。

混叠在弯曲的脉管系统(如分叉)和遇到大范围多向速度的情况下是最有问题的。在这种情况下, CDI 可能变得难以解释。

pYYBAGJNRhSARZIDAAKmuDSmxr8991.png

图 3 有混叠伪影的动脉分叉模型上的 CDI 序列

新的基于深度学习的解决方案

LITMUS 小组设计了一种新的基于深度学习的解决方案,以解决 CDI 中股动脉分叉的这些混叠伪影。选择大腿股动脉分叉是因为其不同的流动特性,包括广泛的流动速度和多向流动。在外周动脉疾病的情况下,动脉可能是阻塞的部位,即使在健康的情况下,分叉处也容易出现混叠。

poYBAGJNRhaAOKvBAALH_d0uEy0836.png

图 4 CDI 消除混叠管道概述

为了解决 CDI 中的混叠问题, LITMUS 小组设计了一个两步流程:

使用卷积神经网络( CNN )模型分割 CDI 中的混叠伪影。

分段的锯齿伪影随后通过自适应技术去除。

对于混叠分割,训练 U-Net CNN ,以使用通常在典型 CDI 管道中计算的多个相关超声特征检测混叠伪影,这些特征可以包含与混叠检测相关的特征。该网络在 1136 帧上进行训练,这些帧来自使用 us4us 超声前端采集的三个真实股动脉分叉。 CDI 中的混叠工件被手动标记以用于培训和验证。模型定义和训练在 TensorFlow 中完成。

然后通过自适应相位展开算法利用分割图,该算法根据流动连续性标准反转混叠伪影,从而实现平滑的无混叠流动轮廓。然后,在一次新采集的未观察到的股动脉分叉采集中对该框架进行了评估,结果表明该框架可处理多向和过度混叠。

该框架的计算要求很高,对于简单的消除混叠,每帧需要 500 毫秒以上,对于过度混叠的情况,甚至更慢。

Clara Holoscan 用于床边应用中的实时消除混叠

CDI 被广泛认为是一种护理点模式,可用于快速、即时地了解患者的血流状况。脱机处理会破坏 CDI 的这一功能,因此实时运行别名消除框架非常重要。

英伟达和 LITMUS 组合作加速去混叠框架,以实现在床边应用中使用 NVIDIA Clara HORSOCAN SDK 和英伟达 Clara AGX 开发者工具包的实时性能。

GPU 加速 CDI 平台在英伟达 Clara AGX 开发者工具包上使用了由 LITMUS 先前报告的基于 CUDA 的框架实现。有关更多信息,请参阅 活体超声彩色编码散斑成像实时复杂流动可视化平台 。

原始传感器数据被连续复制到英伟达 RTX 6000 GPU 中 Clara AGX开发工具包,其中定制的CUDA构建内核执行必要的图像形成处理。使用 API-ZDU-TENSRAIN 算法库对相位展开进行了加速,并使用CUK1-ZDU-Net算法对相位展开进行了加速。进一步的 CUDA 和OpenGL函数用于显示。结果是在 Clara AGX开发工具包上运行了一个完整的原始传感器数据到消除混叠CDI包,该包显示了实时性能。

图 5 显示了 Clara AGX 开发者工具包上的抗混叠 CDI 框架,该框架在实时模式下处理股骨分叉模型到抗混叠 CDI 的原始传感器数据。原始数据是使用 us4us 前端获取的,该前端使研究人员能够访问从探头到达的所有基本信号

screen-capture-aliasing-resistant-CDI.gif

图 5 Clara AGX 开发工具包上抗混叠 CDI 平台的屏幕截图

Left: 使用常规处理管道获得混叠 CDI 序列。在收缩期(心动周期的峰值,冻结帧),血流正在远离探头,并且都应该是蓝色的。然而,在底部支管中,探头方向的流速超过了最大可测量流速,因此显示为红色/橙色阴影区域,错误地表明流速正在上升。

Middle: 在实时成像会话期间,通过集成 U-Net 模型获得混叠分割。您可以看到如何在现场正确捕获脉动帧中的锯齿伪影。

Right: CDI 序列消除了混叠。最大可测量速度增加,血流可视化更直观。

消除混叠模块的处理时间提高到 30 fps ,比之前的 2-2.5 fps 提高了 12 倍。在此基础上, CuPy 被用来制作原型,并获得快速的 GPU 加速度,提供中等~ 15 fps 的速度。

结论

英伟达集团的工作流程表明,英伟达 Clara AGX 开发工具包和 NVIDIA Clara HORSOCAN SDK 可以实时解决 CDI 中的混叠伪影。通过消除血流方向的模糊性,消除混叠使图像可视化和解释更加容易。这对弯曲的脉管系统产生了最大的影响,因为超声医生很难猜到血流方向。

关于作者

Vanessa Braunstein 在 NVIDIA 的医疗团队从事产品营销工作。此前,她在基因组学、医学成像、制药、化学和诊断公司从事产品开发和营销。她学习分子和细胞生物学、公共卫生和商业。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4597

    浏览量

    101763
  • 超声波
    +关注

    关注

    63

    文章

    2809

    浏览量

    136733
收藏 人收藏

    评论

    相关推荐

    NVIDIA和西门子为工业设计和制造带来沉浸式可视化和生成式AI

    西门子将 NVIDIA Omniverse Cloud API 与 Siemens Xcelerator 平台结合使用,提供沉浸式可视化体验,以增强产品生命周期管理。
    的头像 发表于 03-27 10:32 172次阅读

    数据可视化的应用有哪些?#可视化 #光点科技

    数据可视化
    光点科技
    发布于 :2023年10月13日 09:19:27

    基于Arduino做个音乐可视化LED灯带

    基于Arduino做个音乐可视化LED灯带,快来探索用了什么原理和材料!结合提供的简单代码,软硬件结合,你也可以在音乐中成为最靓的仔!
    发表于 09-27 08:08

    数据可视化的未来发展趋势是什么?#可视化 #数据可视化 #光点科技

    数据可视化
    光点科技
    发布于 :2023年09月25日 18:29:24

    数据可视化有什么优势?#可视化 #数据可视化 #光点科技

    数据可视化
    光点科技
    发布于 :2023年09月25日 09:50:22

    什么是数据可视化?如何进行数据可视化?#可视化 #光点科技

    数据可视化
    光点科技
    发布于 :2023年09月20日 17:41:03

    可视化大屏设计模板 | 主题皮肤(报表UI设计)

    效果: 下载使用步骤: 1、上传数据源。登录奥威软件数据可视化平台后,点击“新增数据源”,在弹窗中填入数据源名称、类型后,以点击选中或拖拉到指定位置的方式上传数据源,点击确定即可。 2、新增报表
    发表于 09-12 10:10

    数字孪生可视化平台的主要应用场景是什么?#可视化 #光点科技

    数字可视化
    光点科技
    发布于 :2023年09月11日 10:31:51

    设备运营可视化平台,数据大屏展示,可视化管理

    数据的趋势和变化,从而更好的开展业务和进行售后服务,具备良好的实用性。 在实际应用中,数之能设备运营可视化平台可用于运维管理、设备管理、生产监控等方面。例如,在运维管理中,通过设备运营可视化
    的头像 发表于 09-08 13:59 360次阅读
    设备运营<b class='flag-5'>可视化</b><b class='flag-5'>平台</b>,数据大屏展示,<b class='flag-5'>可视化</b>管理

    什么是数字孪生可视化平台?#可视化 #光点科技

    数字可视化
    光点科技
    发布于 :2023年09月08日 10:00:12

    keras可视化介绍

    , 0.24421487748622894]5 训练过程的可视化:keras + Tensorboard Tensorboard提供训练过程可视化的功能,是通过keras的回调函数来实现的。 # 截取部分代码如下
    发表于 08-18 07:53

    工业CT扫描检测软件可视化和检查CT数据

    工业CT扫描检测软件GOMVolumeInspectPro,提供创新的体积可视化和检查功能,用于分析从任何可用的工业CT计算机断层扫描系统(CT)收集的体积数据01、加强的体积可视化
    的头像 发表于 06-19 11:31 952次阅读
    工业CT<b class='flag-5'>扫描</b>检测软件<b class='flag-5'>可视化</b>和检查CT数据

    工厂物流3D智能可视化管理平台

    智能可视化管理平台可以带来的价值。 实时监控 工厂物流3D智能可视化管理平台可以实现对物流过程的实时监控。通过将物流过程的数字化信息转化为
    的头像 发表于 06-09 14:38 372次阅读
    工厂物流3D智能<b class='flag-5'>可视化</b>管理<b class='flag-5'>平台</b>

    智慧交通大屏可视化平台-广州华锐互动

    智慧交通是数字孪生技术广泛应用的领域之一,而3D数据可视化监测平台作为其中的重要组成部分,可以解决很多痛点问题。 首先,智慧交通大屏可视化平台可以实现道路交通情况的实时监测和预测。
    的头像 发表于 05-26 14:36 465次阅读
    智慧交通大屏<b class='flag-5'>可视化</b><b class='flag-5'>平台</b>-广州华锐互动

    智慧煤矿3D可视化管控平台有哪些用途?

    智慧煤矿3D可视化管控平台是一种利用现代信息技术手段,对煤矿的生产过程进行实时监测、管理和控制的系统。它能够将煤矿内的数据、信息、图像等多种信息整合在一起,通过3D可视化的方式呈现给煤
    的头像 发表于 05-12 15:19 550次阅读