快速且經(jīng)濟(jì)高效的全基因組測序和分析可以迅速為患有罕見或未診斷疾病的危重患者提供答案。最近在加速臨床測序方面取得的進(jìn)展,例如創(chuàng)造世界紀(jì)錄 用于快速診斷的DNA測序技術(shù) ,使我們離在臨床環(huán)境中進(jìn)行全基因組基因診斷又近了一步。
斯坦福大學(xué)醫(yī)學(xué)院( Stanford University School of Medicine )、NVIDIA ( NVIDIA )、谷歌( Google )、 UCSC 和牛津納米孔技術(shù)( Oxford Nanopore Technologies , ONT )領(lǐng)導(dǎo)的一個團(tuán)隊(duì)最近使用這項(xiàng)技術(shù)來識別與疾病相關(guān)的基因變異,這些變異在短短 7 小時 18 分鐘內(nèi)就得到了診斷,結(jié)果于 2022 年 1 月發(fā)表在 新英格蘭醫(yī)學(xué)雜志 上。
這一創(chuàng)紀(jì)錄的端到端基因組工作流程依賴于創(chuàng)新技術(shù)和高性能計(jì)算。它利用長閱讀納米孔測序技術(shù)更好地分析結(jié)構(gòu)變體。這是在 48 個流動池中實(shí)現(xiàn)的,優(yōu)化的方法使孔占有率達(dá)到 82% ,在短短幾個小時內(nèi)快速生成 202 千兆堿基。對輸出的分析分布在一個谷歌云計(jì)算環(huán)境中,包括 16 個 4xV100 GPU 實(shí)例(總計(jì) 64 GPU 個)的基調(diào)用和對齊,以及 14 個 4xP100 GPU 實(shí)例(總計(jì) 56 GPU 個)的變體調(diào)用。
自一月 NEJM 發(fā)表以來,NVIDIA Clara 團(tuán)隊(duì)一直在優(yōu)化 DGX-A100 的全基因組工作流程,使臨床醫(yī)生和研究者能夠在八 A100 GPU 上部署與世界記錄方法相同的分析,而在 4H10M 中部署 60X 全基因組(圖 1 ;在 HG00 參考樣品上標(biāo)明)。
圖 1 。 NVIDIA DGX-A100 上優(yōu)化的納米孔測序工作流程
這不僅可以在本地運(yùn)行的單服務(wù)器( 8-GPU )框架中實(shí)現(xiàn)快速分析,還可以將每個樣本的成本降低三分之二,從 568 美元降至 183 美元。
基本呼叫和對齊
堿基調(diào)用是將原始儀器信號分類為基因組堿基 A 、 C 、 G 和 T 的過程。這是確保所有下游分析任務(wù)準(zhǔn)確性的計(jì)算關(guān)鍵步驟。這也是一個重要的數(shù)據(jù)縮減步驟,將生成的數(shù)據(jù)縮減約 10 倍。
以每堿基 340 字節(jié)為單位,一個單一的 60 倍覆蓋率的整個基因組在原始信號中很容易達(dá)到數(shù)萬億字節(jié),而在處理時則為數(shù)百千兆字節(jié)。因此,計(jì)算速度有利于與測序輸出速度相匹敵,這是非常重要的,通過 48 個流動單元的 128000 個孔,以每秒約 450 個堿基的速度進(jìn)行。
ONT 的 PromethION P48 測序儀在 72 小時的運(yùn)行中可以產(chǎn)生多達(dá) 10 個 Terabase ,相當(dāng)于 96 個人類基因組(覆蓋率為 30 倍)。
這項(xiàng)工作所需的快速分類任務(wù)已經(jīng)受益于深度學(xué)習(xí)創(chuàng)新和 GPU 加速。用于此目的的核心數(shù)據(jù)處理工具包 Guppy 使用遞歸神經(jīng)網(wǎng)絡(luò)( RNN )進(jìn)行基址調(diào)用,可以選擇更小(更快)或更大(更高精度)的遞歸層大小的三種不同架構(gòu)。
BaseCall 中的主要計(jì)算瓶頸是 RNN 內(nèi)核,它得益于 GPU 與 ONT 序列器的集成,例如桌面網(wǎng)格 Mk1 ,其中包括一個 V100 GPU 和手持 MinION Mk1C ,其中包括一個 Jetson 邊緣平臺。
比對是將合成的堿基 DNA 片段(現(xiàn)在是 As 、 Cs 、 Gs 和 Ts 的字符串形式)提取出來,并確定這些片段起源的基因組位置,通過大規(guī)模并行測序過程組裝完整基因組的過程。這基本上是從許多 100-100000 bp 長的讀取中重建全長基因組。就創(chuàng)造世界紀(jì)錄的樣本而言,總共有 1300 萬次閱讀。
在最初的世界記錄分析中, basecalling 和 alignment 分別在 Guppy 和 Minimap2 的不同實(shí)例上運(yùn)行。通過將其遷移到單服務(wù)器 DGX-A100 解決方案,并使用 Guppy 的集成 minimap2 aligner ,您可以立即節(jié)省 I / O 時間,并從 A100 用于 RNN 推斷的張量核心中獲益。通過在 DGX 上分別平衡八個 A100 GPU 和 256 CPU 線程的基址調(diào)用和對齊,這兩個進(jìn)程可以完全重疊,以便與基址調(diào)用同時對齊讀取,不會對總運(yùn)行時間造成影響(《 1 分鐘)。
這使 DGX-A100 上的 basecalling 和校準(zhǔn)步驟的運(yùn)行時間變?yōu)?2h 46m ,這也可以與測序本身重疊。這與 60 倍樣本的預(yù)期測序時間相似。
變異呼叫
變體調(diào)用是工作流的一部分,旨在識別新組裝個體基因組中與參考基因組不同的所有點(diǎn)。這包括掃描基因組的全部寬度,以尋找不同類型的變異。例如,這可能包括小的單堿基對變體,一直到覆蓋數(shù)千個堿基對的大結(jié)構(gòu)變體。世界紀(jì)錄管道使用胡椒粉作為小變體,使用嗅探作為結(jié)構(gòu)變體。
PEPPER Margin DeepVariant 方法旨在優(yōu)化小變異,以實(shí)現(xiàn)納米孔測序產(chǎn)生的長讀。
PEPPER 通過 RNN 識別候選變體, RNN 由兩個雙向、選通、循環(huán)單元層和一個線性轉(zhuǎn)換層組成。
Margin 然后使用隱馬爾可夫模型方法進(jìn)行一個稱為單倍型的過程,確定哪些變體是從母系或父系染色體一起遺傳的。它將此信息傳遞給 Google DeepVariant ,以最大限度地提高雜合子變體調(diào)用的準(zhǔn)確性。
DeepVariant 通過一個深度卷積神經(jīng)網(wǎng)絡(luò)對最終變體進(jìn)行分類,該網(wǎng)絡(luò)建立在 Inception v2 體系結(jié)構(gòu)之上,專門適用于 DNA 讀取堆積輸入圖像。
總的來說, PEPPER Margin DeepVariant 允許更快的 PEPPER 神經(jīng)網(wǎng)絡(luò)掃描整個基因組尋找候選基因,然后使用更大的 DeepVariant 神經(jīng)網(wǎng)絡(luò)對這些候選基因進(jìn)行高精度的變異調(diào)用。為了加速這條管道,世界紀(jì)錄工作流使用了 Parabricks DeepVariant ,這是一種 GPU 加速的實(shí)現(xiàn),比 CPU 上的開源版本快 20 倍以上(圖 2 )。
Clara 團(tuán)隊(duì)通過修改 PEPPER Margin 以集成方式運(yùn)行,按染色體分割數(shù)據(jù),并在 GPU 上同時運(yùn)行程序,進(jìn)一步加快了速度。 PEPPER 還針對批量大小、工作人員數(shù)量和呼叫者數(shù)量等管道參數(shù)進(jìn)行了優(yōu)化,并對 PyTorch 進(jìn)行了升級,以支持 NVIDIA 安培體系結(jié)構(gòu)加速 RNN 推理瓶頸。
對于結(jié)構(gòu)變量調(diào)用, Snifgles 升級為最近發(fā)布的 Snifgles 2 ,其效率要高得多,僅在 CPU 上的加速度為 38 倍。
所有這些改進(jìn)使 DGX-A100 的多變量調(diào)用階段的運(yùn)行時間達(dá)到 1h 24m 。
圖 2 。 Parabricks DeepVariant 支持在 ONT 數(shù)據(jù)上快速運(yùn)行
視頻 1 。危重病人超快速 DNA 測序技術(shù)的優(yōu)化
使用 NVIDIA DGX-A100 為實(shí)時測序供電
通過優(yōu)化 DGX A100 的世界記錄 DNA 測序技術(shù),NVIDIA Clara 團(tuán)隊(duì)為實(shí)時測序提供了動力,簡化了單個服務(wù)器上的復(fù)雜工作流,并且在達(dá)到最先進(jìn)性能的同時,將分析成本降低了 50% 以上。
關(guān)于作者
Harry Clifford:作為NVIDIA 基因組學(xué)的高級產(chǎn)品架構(gòu)師, Harry 致力于工程和產(chǎn)品開發(fā)之間的接口,利用NVIDIA 在人工智能、高性能計(jì)算( HPC )和數(shù)據(jù)分析堆棧方面的專業(yè)知識,以加速高精度解決方案解決基因組學(xué)工作流問題。他的背景是生物信息學(xué)和功能基因組學(xué),包括來自牛津大學(xué)的博士學(xué)位、生物制藥行業(yè)和劍橋大學(xué)的博士后經(jīng)驗(yàn)以及生物技術(shù)領(lǐng)域的創(chuàng)業(yè)經(jīng)驗(yàn)。哈里在與人共同創(chuàng)立精準(zhǔn)腫瘤公司 CCG 后,被列入福布斯“ 30 歲以下”榜單。 ai (被 Dante Labs 收購),一家由 Y Combinator 和默克加速器支持的初創(chuàng)公司,通過深度學(xué)習(xí)和高級分析軟件提供決策支持。
審核編輯:郭婷
-
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4779瀏覽量
101172 -
NVIDIA
+關(guān)注
關(guān)注
14文章
5076瀏覽量
103724
發(fā)布評論請先 登錄
相關(guān)推薦
評論