開發(fā)者可利用 Clara Holoscan 構建應用,用以處理多模態(tài)傳感器數(shù)據(jù)、運行基于物理性質(zhì)的模型、加速 AI 推理和實時渲染高質(zhì)量圖形
AI 醫(yī)療設備技術創(chuàng)新為醫(yī)療健康專業(yè)人員提供更好的決策工具,在機器人輔助手術、介入放射學和放射治療規(guī)劃等方面提供幫助。
為了在臨床應用方面實現(xiàn)這一點, AI 醫(yī)療設備必須具有一個加速流程來實時處理和預測數(shù)據(jù),并將其可視化。
NVIDIA Clara Holoscan 是醫(yī)療健康行業(yè)的新計算平臺,基于NVIDIA AGX Orin,能為可擴展、軟件定義、端到端流媒體數(shù)據(jù)處理的醫(yī)療設備提供所需的計算基礎設施。
作為一個可將醫(yī)療設備與邊緣服務器無縫連接的端到端平臺,NVIDIA Clara Holoscan 可助力開發(fā)者創(chuàng)建 AI 微服務,用以在設備上運行低延遲串流應用,同時將更復雜的任務傳至數(shù)據(jù)中心資源。
讓不可能的夢想落地
實現(xiàn)實時工作流程
幾乎每臺智能醫(yī)療設備都具有類似的處理流程。該流程始于傳感器,歷經(jīng)數(shù)據(jù)域,然后實現(xiàn)可視化,便于人類進行決策。工作流程每個階段所需的計算水平視所用設備(CT 掃描儀、內(nèi)窺鏡或 ICU 室內(nèi)攝像機)而有所差異。
NVIDIA Clara Holoscan 可加速以下每個階段:
高速 I/O:NVIDIA GPUDirect RDMA 借助 NVIDIA ConnectX 智能網(wǎng)卡或第三方 PCI Express 卡,可以將數(shù)據(jù)直接流式傳輸?shù)?GPU 顯存,以便實現(xiàn)超低延遲下游處理。
物理處理:在數(shù)據(jù)傳輸?shù)?GPU 后,CUDA-X 和 NVIDIA Triton 推理服務器將加速基于物理性質(zhì)的計算或 AI 處理,將傳感器數(shù)據(jù)轉換到圖像域。例如,X 射線和 CT 中的圖像重建或超聲波中的波束成形。
圖像處理:使用 NVIDIA Triton 將圖像數(shù)據(jù)輸入到 AI 模型中,用以檢測、分類、分割或目標追蹤。
數(shù)據(jù)處理:使用 NVIDIA cuCIM 庫將傳感器的圖像數(shù)據(jù)流與之前獲取的其他圖像相結合,開發(fā)者可以使用電子健康記錄等補充信息對數(shù)據(jù)進行配準或者增強。
渲染:通過 Clara 渲染服務器,開發(fā)者可以實時地將設備數(shù)據(jù)和預測數(shù)據(jù)進行3D可視化,或使用 NVIDIA Omniverse 進行交互式電影級渲染,或使用 CloudXR 來增強現(xiàn)實。例如,給臨床醫(yī)生一個更好的器官或腫瘤分割圖像。
作為可擴展的體系架構,Clara Holoscan 能夠從醫(yī)療設備擴展到 NVIDIA 認證邊緣服務器,再到數(shù)據(jù)中心或云中的 NVIDIA DGX 系統(tǒng)。開發(fā)者可通過此平臺,按需在其醫(yī)療設備中充分添加或減少計算和輸入/輸出功能,從而平衡延遲、成本、空間、性能和帶寬的需求。
加速醫(yī)療設備生態(tài)系統(tǒng)
許多醫(yī)療設備公司正在將 AI 和機器人技術融入其中,在機器人手術、移動 CT 掃描、支氣管鏡檢中使用 NVIDIA 加速計算平臺。
NVIDIA Clara Holoscan 旨在通過幫助設備制造商從設備縱向擴展到數(shù)據(jù)中心,并通過利用領域眾多的 NVIDIA AI 解決方案實現(xiàn)橫向擴展,以便更好地支持此類應用。
為了加速多種傳感器輸入的實時醫(yī)療設備的發(fā)展,Clara Holoscan 平臺支持來自 NVIDIA Inception AI 和數(shù)據(jù)科學初創(chuàng)公司加速器計劃成員的 I/O 卡,包括:
AJA 視頻系統(tǒng) - 用于內(nèi)窺鏡檢查和手術可視化應用的視頻采集卡。
KAYA 儀器 - 用于顯微鏡和科學成像儀器的視頻采集卡。
us4us - 用于軟件定義超聲波解決方案開發(fā)的研究型前端設備。
Verasonics 是超聲波研究前端硬件的領導者,它將支持 Clara Holoscan使用高速網(wǎng)絡技術將數(shù)據(jù)直接流式傳輸?shù)?NVIDIA GPU。
Clara·Holoscan SDK:一次開發(fā),任意部署
借助 Clara Holoscan,開發(fā)者可以自定義應用,將其作為設備和服務器上的一系列模塊化微服務運行。由于 Clara Holoscan 是由軟件定義,醫(yī)療設備公司可以隨著時間的推移持續(xù)不斷地升級和改進其解決方案。
Clara Holoscan SDK 通過加速庫、AI 模型和超聲波、數(shù)字病理學、內(nèi)窺鏡檢查等參考應用支持此項工作,以幫助開發(fā)者利用嵌入式和可擴展的混合云計算。有了端到端的部署平臺,企業(yè)可以更容易地升級應用,為醫(yī)學的日常實踐帶來新的研究突破。
責任編輯:haq
-
傳感器
+關注
關注
2553文章
51407瀏覽量
756634 -
NVIDIA
+關注
關注
14文章
5076瀏覽量
103729 -
AI
+關注
關注
87文章
31536瀏覽量
270347
原文標題:GTC21 | NVIDIA 創(chuàng)建AI計算平臺,為醫(yī)療儀器和設備提供實時傳感技術支持
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
相關推薦
評論