吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AI+5G,第一次成功完成遠程指導下的心臟病手術

DPVg_AI_era ? 來源:lp ? 2019-04-08 09:57 ? 次閱讀

剛剛,廣東省人民醫院與廣東高州市人民醫院完成全國首例AI+5G手術,成功為心臟病患者“補心”。手術期間的AI技術是由曾靠“貪心算法”成功追回被搶車的圣母大學計算機系終身副教授史弋宇團隊提供。這次手術也是AI在臨床上的一次落地應用。

AI+5G,第一次成功完成遠程指導下的心臟病手術。

剛剛,廣東省人民醫院與廣東高州市人民醫院共同上演一場直播“大片”:

高州市人民醫院心外手術室里,醫生主刀進行心臟腔鏡手術;在相隔近400公里外的廣東省人民醫院,專家通過觀看大屏幕上5G傳輸的實時超高清手術畫面,對高州市的手術進行遠程指導。

在這場手術前,醫院使用到了自主研發的全自動AI去噪以及建模軟件,一鍵完成建模,耗費時間從2-6小時縮短至兩分鐘以內,并自動生成3D打印機可識別的3D數字心臟模型(STL格式),直接用來打印出實體1:1心臟模型。

值得注意的是,手術的AI技術部分是由廣東省人民醫院特聘顧問史弋宇教授帶領團隊參與。史弋宇是圣母大學計算機系終身副教授,博士生導師,并兼任電子系終身副教授。

史弋宇

今年1月初,新智元報道過史弋宇教授被兩名劫匪搶去汽車,在不到24小時之內,靠手機發動應用程序和“貪心算法”成功將車找回,新智元的讀者應該有深刻印象。

這次參與全國首個AI+5G手術,史弋宇籌備了一年時間,手術成功也讓AI在醫療領域更加落地。

患者情況:先天心臟病,心臟出現孔

接受AI+5G手術的是一位41歲的女性患者,據醫生介紹,這名患者有先天心臟病,近期因“勞力性心悸、氣促10余天”入院。經過心臟彩超和右心導管等檢查發現,患者診斷為繼發孔型房間隔缺損。

房間隔缺損本來是簡單先心病,如果在小時候做開胸手術,操作上是相對容易,而且風險很低的。但是這位患者已經41歲,出現了重度肺動脈高壓,開始出現心力衰竭,病情已經從簡單先心病轉變成復雜的成人先心病,簡而言之心臟沒有正常的發育,形成了一個缺損,就是我們所說的心臟里面出現一個孔。

模型演示患者的心臟中間出現一個孔(攝影:邱海龍)

這個孔的存在會導致病人心臟左心房的血會持續往右心房分流,加重右心房的整個心臟的負荷,也會加重肺循環的負荷,久而久之,心臟也就會持續擴大,肺動脈的壓力也會持續的增高。

通過3D打印出來的1:1心臟模型可以看到,患者的心臟比正常人的偏大,而正常人的心臟大約有一個拳頭那么大。

通過影像也可以觀察到,患者的心臟占據了整個胸腔的2/3以上。

由于房間隔缺損一直伴隨患者41年,錯過了治療的最佳時期,因此無法進行常規的心臟手術矯治,最嚴重的結果可能會導致心肺聯合移植甚至是死亡。

同時,患者的心肺功能衰竭到已經出現癥狀,因此術中的操作必須仔細,心肌保護要到位,圍術期的管理也是挑戰,再加上是胸腔鏡下做手術,對醫生的手術操作是較大的考驗。

準備階段:AI三維建模只需2分鐘

對于這次手術,廣東省人民醫院可謂用上了目前最熱門的“黑科技”,其中多項技術均已申請專利進行知識產權保護。史弋宇教授負責參與AI部分,主要用于術前準備階段。

1、圖像壓縮

醫院把影像采集下來以后,要進行實時影像傳輸,史弋宇教授聯合佛羅里達國際大學聞武杰教授先做一個面向機器學習的影像壓縮,在數據接收端會自動對影像進行去噪,然后分割、建模。

影像壓縮的出發點和傳統的壓縮(比如JPEG)不同,JPEG是針對人的視覺的,要保證壓縮后沒什么視覺上的損失。而該工作做的壓縮是為了AI建模,不以人的視覺作為標準,而是針對計算機視覺的影像壓縮。

通過壓縮,接收的圖像體積變小了,而且圖像分割的準確度得到了提升,壓縮率提升3倍,且能提升分割效果。

關于影像壓縮的成果,論文將會發表在今年6月的CVPR上。

論文題目:Machine Vision Guided 3D Medical Image Compression for Efficient Transmission and Accurate Segmentation in the Clouds

2、AI去噪

在上面的圖像壓縮過程中,還包含了一部分去噪技術。因為這里的圖像是用來建模的,所以在壓縮的過程中,同時把一部分噪聲也去掉了。在去噪方面,使用了注意力神經網絡,能夠集中注意到圖像里的噪聲。

史教授團隊對每一例影像進行自動去噪,最后的結果直接進行自動建模,不需要人工干預。這樣就可以把心臟的模型建成一個可3D打印的模型。

3、機器學習和傳統計算機視覺的混合建模

對于結構性心臟病患者來說,他的心臟結構可能跟正常的心臟差別很大,所以史教授團隊用了機器學習加傳統計算機視覺的方法。對于心臟結構比較變化大的,用一些傳統計算機視覺的方法;關于心臟的一些精細結構,使用人工智能與傳統計算機視覺方法的混合架構。

整個心臟的三維建模時間大概是2分鐘,而且準確度在先天性心臟病上也比傳統方法的70%提升了12%。如果使用傳統3D建模方法,大概需要幾個小時時間。

這個模型的直接作用有兩個。第一個作用是讓醫生在術前準備的時候,會把這個模型用3D打印出來,供醫生在術前準備時參考,能夠直觀地看看患者心臟到底是什么樣的,有些什么問題。

模型的另外一個重要作用是,讓術中進行遠程指導的醫生,能夠通過VR和MR技術,利用傳輸過來的實時影像以及之前的建模,能夠實時、動態地指導目前的手術的進展。

在本場手術中,醫院采用的是3D建模方法,指導心內手術操作非常直觀;但是在某些情況下,比如一些急診重癥病人,來不及進行3D打印,就可以實時用VR的虛擬心臟來指導,也很直觀。

下圖可以顯示AI在手術中起到的作用:

手術過程:VR演示補心術

準備工作之后是手術過程。

今天上午9點35分左右,手術正式開始。在廣東省人民醫院現場的大屏幕上(下圖),有四個播放畫面,從左到右分別是高州市人民醫院、高州人民醫院手術室、廣東省人民醫院、VR視頻手術過程演示。

高州市人民醫院手術現場

從現場播放的VR演示視頻,我們可以看到整個手術過程。

手術開始前,先將患者右側胸腔墊高30度。然后確定手術入路,即主操作孔、鏡孔和輔助操作孔。

患者身上會插管連接體外循環機,就是通常所說的人工心肺機,后續進行身體降溫之后,醫生再灌注心機保護液,讓心臟停下來,之后再進行心臟的探查跟房間隔缺損的修補。

下圖是房間隔缺損修補術過程:

手術中最關鍵的環節有兩個,一個是在心臟的Koch三角區,縫合時需要注意不要靠近這,以免引起心臟心肌損傷,導致心臟跳動的節律傳導受到阻滯。

另一個是心臟的解剖結構要看得更清楚一些,修補房間隔缺損的“補片”要補得更大一些。

最后確認沒有殘余分流,修補完成,心臟復跳,止血關胸,手術完成。

現場經過近3個小時的手術后,4月3日12:55分,患者心臟復跳,手術成功!

5G比4G提速10倍,時延低于30微秒

手術現場的主刀醫生為高州市人民醫院的何勇醫生,指導醫生是廣東省人民醫院心外科的郭惠明醫生。

根據官網介紹,何勇醫生是高州人民醫院副主任醫師,每年完成心外手術達500例左右,手術量在華南地區處于領先,其中瓣膜替換術在400例左右,手術成功率達99%以上。

高州市人民醫院雖然在心外科也有很多經驗相對比較成熟,常規心外科手術都能做,但以前這類手術主要是采取大切口的開胸手術來做,微創的腔鏡手術做得不多。

這場手術是做微創腔鏡手術,患者開刀3-4厘米,對醫生的要求更高,會有一定的難度,因此需要廣東省人民醫院的指導支持。

郭惠明是廣東省人民醫院主任醫師、心外科副主任,擅長微創胸腔鏡手術,在手術治療二尖瓣成形或置換、先天性心臟病、房顫和冠心病的雜交治療方面處于國內領先水平。

(圖據廣州日報)

地圖顯示,高州市人民醫院距離廣東省人民醫院將近400公里,但現場畫面沒有明顯時延。傳回現場測試結果,整體網絡速度與4G相比提速10倍,時延低于30微秒,幾時就是同步的。

在現場,高州人民醫院主刀醫生還詢問:“心包是否在這里打開?”位于廣州的郭惠明立即回答:“上移3厘米。”

目前,廣東省人民醫院已經跟廣東移動、華為合作,實現5G全覆蓋,室外網絡由4G跨越到5G,用戶體驗速率由80Mbps提升到800Mbps,達到與有線光纖網絡相當的體驗。

對于AI,雖然近年來人工智能在醫療領域取得了飛速進展,但在實際臨床中的應用卻非常有限。其中一個主要的原因就是人工智能還缺乏足夠的可信度和可解釋度來完全取代醫生進行自動診治。

史弋宇說,團隊目前階段主要著眼于人工智能在醫療系統中的輔助作用來幫助其盡快落地。例如在本次遠程手術指導中采用到的面向人工智能的圖像壓縮傳輸,智能影像去噪,以及智能心臟建模,都是以為醫療專家更方便,更快捷,更準確的診治為目標。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 5G
    5G
    +關注

    關注

    1356

    文章

    48504

    瀏覽量

    566006
  • 3D打印
    +關注

    關注

    26

    文章

    3561

    瀏覽量

    109588
  • ai技術
    +關注

    關注

    1

    文章

    1290

    瀏覽量

    24452

原文標題:剛剛,中國完成首例AI+5G心臟手術!2分鐘AI建模,400公里遠程協作“補心”

文章出處:【微信號:AI_era,微信公眾號:新智元】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    請教ADC12D800RFRB評估板第一次使用問題

    ADC12D800RFRB評估板第一次使用問題 大家好,我的問題如下: 第一次使用的時候按照提供的個使用手冊,安裝了WV5,連好板子,PC也識別到了。但是手冊上說,
    發表于 01-21 06:50

    ADS1256第一次上電的時候,采集的ADC信號是實際值的半,為什么?

    最近在用ADS1256這款ADC芯片,出現了個很怪異的問題。當我第一次上電的時候,采集的ADC信號是實際值的半,重新上電后又正常了。 但是并不是每次
    發表于 12-13 15:33

    DDC264第一次執行初始化,DOUT無輸出的原因?怎么解決?

    第一次執行初始化操作(Figure 30.Configuration register write and read operations)時,DOUT無輸出。但在第二及之后執行相同的操作,可以
    發表于 11-19 06:32

    LMK1C1104 buffer會在上電后第一次工作時clkout丟掉1個cycle,為什么?

    你好,我們在使用LMK1C1104時發現標題描述的問題,時序是使能信號1G在上電時就上拉了,CLKIN會在后續通過手動指令發送,并不是直有時鐘;每次在上電后第一次發送時鐘8個cycles的時候
    發表于 11-11 08:25

    用LM4675D類功放時,第一次個焊上后有輸入就是沒有輸出,為什么?

    用LM4675D類功放時,第一次個焊上后有輸入但是就是沒有輸出,外部電路未發現異常,后來將板上芯片更換后,可以使用,但用了不久,芯片便又沒有輸出,發現芯片并未發熱.怎么回事?謝謝
    發表于 11-01 06:43

    TAS2557第一次跟第二播放的時候輸出聲音不同, 請問可以從甚么地方下手檢查?

    第一次跟第二播放的時候, 輸出的聲音不同, 請問可以從甚么地方下手檢查, 謝謝!
    發表于 10-18 06:00

    在例程 ”BLE_GATTS_SPP“中,手機第一次連接藍牙服務時,怎么添加配對密碼?

    在例程 ”BLE_GATTS_SPP“中,手機第一次連接藍牙服務時,怎么添加配對密碼?
    發表于 07-19 08:28

    stm32F407第一次數據沒有進行接收,第二數據發送時才進行接,為什么?

    stm32F407第一次數據沒有進行接收,第二數據發送時才進行接
    發表于 07-05 08:11

    基于esp_idf/wifi/simple_wifi這個示例,調用wifi_init_sta函數測試的是STA模式,總是一次成功一次失敗,為什么?

    基于esp_idf/wifi/simple_wifi這個示例,調用wifi_init_sta函數測試的是STA模式,第一次連接成功,接著馬上重啟,就會出現連接失敗,再重啟一次,又會連接成功
    發表于 06-26 06:02

    STM32WB5MMG只有第一次下載程序才能正常運行,為什么?

    和 PC11,SPI1 通信)和 MAX30112 芯片(中斷引腳 PD0,I2C3 通信)收集數據。但我發現了些難以解決的問題。 問題描述: 1. 1.我的程序只有在第一次下載時才能正常運行。再次開機
    發表于 05-28 07:16

    OpenHarmony項目群生態委員會第一次線下會議成功召開

    4月18日,在鴻湖萬聯(江蘇)科技發展有限公司支持, OpenAtom OpenHarmony(簡稱"OpenHarmony")項目群生態委員會第一次線下會議在無錫市國家軟件園召開。
    的頭像 發表于 04-20 09:42 ?651次閱讀

    通過CAN控制電機啟動,第一次發送start motor后,電機沒有起來的原因?

    各位大神,我通過CAN控制電機啟動,第一次發送start motor后,電機沒有起來,然后返回狀態為ALIGN_CHARGE_BOOT_CAP;再發一次start motor才可以正常使能。不知道這是什么情況呢?求大神解答,謝謝。
    發表于 04-18 07:47

    stm32f767zg外擴sram第一次讀寫沒問題,再次直接死機的原因?

    代碼是用cubemx生成的,自己加了個讀寫測試,第一次可以連續的讀寫外擴的整片內存,也可以只讀寫個地址,都可以成功,之后再次讀寫程序就死機了,直接讀取地址和調用庫里的讀寫函數結果也
    發表于 04-16 06:13

    stm32f767第一次讀取nandflash導致屏幕閃爍的原因?

    fmsc總線上同時掛在sdram做ltdc顯存,nandflash存儲文件圖片,比如我把張圖片存入nandflash,當我第一次從nandflash讀取這張圖片的時候會導致屏幕閃爍花屏一下,但之后
    發表于 04-09 06:02

    STM32L4 I2C主從通信,第一次通信成功,第二只檢測一次中斷就卡住了為什么?

    STM32L4 通過I2C方式組成主機——從機通信(主機從機都是stm32L431),主機給從機第一次發送消息能夠成功,但是從機返回信息就會失敗。 主機給從機第一次發送消息后,不讓從機響應。主機
    發表于 03-29 08:32
    百家乐官网走势图| 大发888怎么下载| 百家乐官网注册平台排名| 华硕百家乐官网的玩法技巧和规则| 水果机榨汁机| 蓝盾百家乐官网娱乐场开户注册| 麻将二八杠技巧| 真人百家乐打法| 大家赢娱乐城| 百家乐龙虎的投注法| 免费百家乐官网规律| 百家乐官网麻将筹码币| 得荣县| 宝马会百家乐娱乐城| 百家乐官网桌出租| 大发888缺少casino组件common| 太子百家乐官网的玩法技巧和规则| 百家乐官网实战案例| 云鼎百家乐的玩法技巧和规则| 百家乐官网平投注法| 大发888娱乐厂场| 百家乐上海代理| 澳门百家乐官网怎么赢钱| 1368棋牌官网| 百家乐下注所有组合| 百家乐官网游戏台| 棋牌评测网站| 威尼斯人娱乐城首选d77com| 澳门玩百家乐官网00| 定西市| 金赞百家乐的玩法技巧和规则| 百家乐官网太阳城| 安卓水果机游戏| 太阳城百家乐如何看路| 百家乐官网桌小| 基隆市| 大发88846| 转载24山五行相克| 366百家乐官网赌博| 紫金县| 美女百家乐的玩法技巧和规则|