谷歌大腦研究人員剛剛在官博上宣布了他們的最新研究成果,使用深度學(xué)習(xí)分析視網(wǎng)膜圖像,以此預(yù)測心血管疾病突發(fā)的風(fēng)險。使用深度學(xué)習(xí)來獲得人體解剖學(xué)和疾病變化之間的聯(lián)系,這是人類醫(yī)生此前完全不知道的診斷和預(yù)測方法,不僅能幫助科學(xué)家生成更有針對性的假設(shè),還可能代表了科學(xué)發(fā)現(xiàn)的新方向。
谷歌AI發(fā)現(xiàn)了人類醫(yī)生尚未發(fā)現(xiàn)的診斷方法:用深度學(xué)習(xí)找到視網(wǎng)膜圖像與心血管疾病聯(lián)系
心臟病發(fā)作、中風(fēng)和其他心血管疾病仍是最重要的公共衛(wèi)生問題。評估這種風(fēng)險是未來減少患者遭受心血管疾病的第一步。為了做這個評估,醫(yī)生將各種風(fēng)險因素納入考慮,例如:遺傳因素(如年齡和性別),生活方式因素(如吸煙和血壓)。雖然可以通過簡單詢問患者來獲得大多數(shù)上述信息,但其他因素(如膽固醇)則需要抽血。醫(yī)生還要考慮患者是否患有其他疾病,如糖尿病,這與心血管疾病風(fēng)險顯著增加有關(guān)。
最近,我們看到了很多用深度學(xué)習(xí)技術(shù)幫助提高醫(yī)學(xué)成像診斷準(zhǔn)確性的案例,尤其是糖尿病眼病。在《自然》子刊 Nature Biomedical Engineering中發(fā)表的《使用深度學(xué)習(xí)從視網(wǎng)膜基底照片中預(yù)測心血管危險因子》中,我們展示了除了檢測眼病外,眼睛的醫(yī)學(xué)圖像還可以非常準(zhǔn)確地預(yù)測心血管健康的其他指標(biāo)。這一發(fā)現(xiàn)令人異常興奮,因為它表明通過視網(wǎng)膜圖像,我們可能會發(fā)現(xiàn)更多診斷疾病的方法。
通過在來自284335名患者數(shù)據(jù)上訓(xùn)練的深度學(xué)習(xí)算法,我們能夠從12026名和999名患者的兩個獨立數(shù)據(jù)集中患者的視網(wǎng)膜圖像,以驚人的高準(zhǔn)確度預(yù)測病人的心血管疾病風(fēng)險因子。例如,我們的算法通過視網(wǎng)膜圖像區(qū)分吸煙者與不吸煙者的準(zhǔn)確率有71%。此外,雖然醫(yī)生通??梢詤^(qū)分嚴(yán)重高血壓患者和正?;颊叩囊暰W(wǎng)膜圖像,但我們的算法可以進一步預(yù)測在11 mmHg以內(nèi)的患者平均收縮壓,包括患有或不患有高血壓的患者血壓。
左圖:眼球背部圖像顯示斑疹(中間的黑點),視盤(右側(cè)亮點)和血管(右側(cè)亮點旁的深紅線)。右圖:視網(wǎng)膜圖像呈灰色,使用了深度學(xué)習(xí)算法的像素可以預(yù)測血壓(綠色陰影高亮顯示)。我們發(fā)現(xiàn)每個心血管風(fēng)險因子預(yù)測使用不同模式,例如血管用于血壓,視盤用于其他預(yù)測。
除了從視網(wǎng)膜圖像預(yù)測各種風(fēng)險因素(年齡,性別,吸煙史,血壓等),我們的算法在直接預(yù)測心血管疾病風(fēng)險方面準(zhǔn)確率很高。算法使用整個圖像來量化圖像與心臟病發(fā)作/中風(fēng)之間的關(guān)聯(lián)?;趦蓮堃暰W(wǎng)膜圖像,一張是(最多5年后)經(jīng)歷過重大心血管疾病(例如心臟病發(fā)作)患者的視網(wǎng)膜圖像,另一張是沒有突發(fā)心血管疾病的患者的視網(wǎng)膜圖像,我們的算法能夠以70%的準(zhǔn)確率識別出罹患心血管疾病的患者。這一數(shù)字接近需要抽血測量膽固醇的其他心血管疾病風(fēng)險計算器的準(zhǔn)確性。
更重要的是,我們通過使用Attention技術(shù)打開了“黑匣子”,以查看算法如何進行預(yù)測。這些技術(shù)使我們生成一個熱圖,顯示哪些像素對于預(yù)測特定的心血管風(fēng)險因子最為重要。例如,如上圖所示,該算法更注重血管情況來預(yù)測血壓。解釋算法如何進行預(yù)測,可以讓醫(yī)生對算法本身更有信心。此外,這項技術(shù)有助于為將來對心血管風(fēng)險和視網(wǎng)膜進行科學(xué)研究生成假設(shè)。
在最廣泛的層面上,我們對這項工作感到興奮,因為它可能代表了科學(xué)發(fā)現(xiàn)的新方法。傳統(tǒng)上,醫(yī)學(xué)發(fā)現(xiàn)通常是通過一種復(fù)雜的猜測和測試形式:通過觀察得出假設(shè),然后設(shè)計和運行實驗來測試假設(shè)。然而,對于醫(yī)學(xué)圖像,由于實際圖像中存在的各種特征、圖案、顏色、值和形狀,觀察和量化關(guān)聯(lián)是困難的。我們使用深度來獲得人體解剖學(xué)和疾病變化之間的聯(lián)系,類似于醫(yī)生學(xué)會將體征和癥狀與診斷新疾病聯(lián)系起來。這可以幫助科學(xué)家生成更有針對性的假設(shè),并推動未來的廣泛研究。
有了這些結(jié)果,還有很多科學(xué)工作需要去做。我們的數(shù)據(jù)集有許多標(biāo)注有吸煙狀況、收縮壓、年齡、性別和其他變量的圖像,但只有幾百個心血管疾病的例子。我們期待在更大和更全面的數(shù)據(jù)集上開發(fā)和測試算法。為了確保這對患者有用,我們將試圖了解干預(yù)措施的效果,如生活方式改變或在風(fēng)險預(yù)測基礎(chǔ)上的藥物治療,我們將生成新的假設(shè)和理論來測試。
谷歌使用深度學(xué)習(xí)分析視網(wǎng)膜圖像的里程碑事件
以上的最新突破,與谷歌在使用深度學(xué)習(xí)分析視網(wǎng)膜圖像方面的長期積累進展分不開。
16年11月,谷歌在《美國醫(yī)學(xué)會雜志》發(fā)表題為 “Development and Validation of a Deep Learning Algorithm for Detection of Diabetic RetinoPathy in Retinal Fundus Photographs”的論文,谷歌研究人員提出的一種基于深度學(xué)習(xí)的算法,該算法能夠在視網(wǎng)膜造影中對糖尿病視網(wǎng)膜病變的跡象做出解釋,幫助醫(yī)生克服資源短缺資困難,為更多的病人做出更專業(yè)的診斷。
任務(wù):糖尿病性視網(wǎng)膜病變是致盲的主要成因之一,主要由眼睛后部細小血管損傷引起。這是通過觀察眼睛的背面,可以看到血管。所以這是一個感知任務(wù)。他們訓(xùn)練了一個深度學(xué)習(xí)系統(tǒng),執(zhí)行與糖尿病視網(wǎng)膜病變評估相關(guān)的幾項工作。文章標(biāo)題中所提到的結(jié)果是評估“可參考”的糖尿病性視網(wǎng)膜病變,其正在檢測中度或更差的眼睛疾病(該組患者的治療方式與“不可參考”眼病患者的治療方式不同)。他們還評估了識別嚴(yán)重視網(wǎng)膜病變并檢測黃斑水腫的能力。
數(shù)據(jù):他們對13萬個視網(wǎng)膜照片進行了訓(xùn)練,每個級別由3到7名眼科醫(yī)生進行評估,最終的標(biāo)簽以多數(shù)票決定。圖像來自使用各種相機的4個位置(美國EyePACS和3家印度醫(yī)院)的康復(fù)臨床數(shù)據(jù)集。
網(wǎng)絡(luò)模型:他們使用了Google Inception-v3深層神經(jīng)網(wǎng)絡(luò)的預(yù)訓(xùn)練版本,這是目前使用最好的圖像分析系統(tǒng)之一。預(yù)訓(xùn)練通常意味著他們已經(jīng)接受過訓(xùn)練的網(wǎng)絡(luò)來檢測非醫(yī)療物體(如貓和汽車的照片),然后進一步對特定醫(yī)學(xué)圖像進行了訓(xùn)練。這就是為什么網(wǎng)絡(luò)只能接受229 x 299像素的圖像。
結(jié)果:這篇論文我認(rèn)為是醫(yī)學(xué)深度學(xué)習(xí)的第一個大突破。他們的AI系統(tǒng)獲得了與單個眼科醫(yī)生相同水平的表現(xiàn),在于眼科醫(yī)生的平均水平相比時,也不落下風(fēng)。
圖:彩色的點是人類眼科醫(yī)生,黑線是谷歌的深度學(xué)習(xí)系統(tǒng)
與人類以上相比,他們的系統(tǒng)在檢測黃斑水腫上做到了相同的水平,但是在更嚴(yán)重視網(wǎng)膜病變絕對值(AUC值)上要差一些。
關(guān)于這一研究的10點總結(jié)
Google(和合作者)訓(xùn)練了一個系統(tǒng),以檢測糖尿病視網(wǎng)膜病變(其導(dǎo)致全世界5%的失明),系統(tǒng)的表現(xiàn)與一組眼科醫(yī)生的表現(xiàn)相當(dāng)。
這是一個有用的臨床任務(wù),這可能不會節(jié)省大量資金,也不會在自動化的時候取代醫(yī)生,但具有很強的人道主義動機。
他們使用130,000個視網(wǎng)膜圖像進行訓(xùn)練,比公開的數(shù)據(jù)集大1到2個數(shù)量級。
他們用更多陽性的案例豐富了他們的訓(xùn)練集,大概是為了抵消訓(xùn)練對不平衡數(shù)據(jù)的影響(一個沒有共識性的解決解決方案的問題)。
由于大多數(shù)深度學(xué)習(xí)模型都針對小型照片進行了優(yōu)化,所以圖像被大量采樣,丟棄了90%以上的像素。目前看來,我們還不知道這是不是件好事。
他們使用一組眼科醫(yī)生來標(biāo)注數(shù)據(jù),很可能花費了數(shù)百萬美元。這是為了獲得比任何單個醫(yī)生的解釋更準(zhǔn)確的“真正的真相”。
第5點和第6點是所有當(dāng)前醫(yī)學(xué)深度學(xué)習(xí)系統(tǒng)的錯誤來源,而且人們對這些話題知之甚少。
深度學(xué)習(xí)系統(tǒng)比醫(yī)生有優(yōu)勢,因為它們可以用于各種“操作點”。相同的系統(tǒng)可以執(zhí)行高靈敏度篩選和高特異性診斷,而無需再訓(xùn)練。所涉及的trade-off是透明的(不像醫(yī)生)。
這是一個很好的研究。它在可讀性上是令人難以置信的,并在文本和補充中包含了大量有用的信息。
該研究似乎符合目前FDA對510(k)法案的要求。雖然這項技術(shù)不太可能要通過這一手續(xù),但是該系統(tǒng)或衍生物完全可能在未來一兩年內(nèi)成為臨床實踐的一部分。
另一主力DeepMind,用機器學(xué)習(xí)診斷三大眼疾,或幾年后進入臨床試驗
而早在2016年6月,谷歌醫(yī)療的另一大主力DeepMind,就開始在視網(wǎng)膜醫(yī)療圖像方面,使用機器學(xué)習(xí)發(fā)力。
視網(wǎng)膜3D掃描圖
那也是DeepMind開展的第一個純粹以研究為基礎(chǔ)的(research-based)健康項目。此前,NHS旗下眼科醫(yī)院已經(jīng)讓DeepMind全權(quán)訪問超過160萬患者的病例和數(shù)據(jù)。研究計劃通過篩選100萬眼部掃描圖像,幫助醫(yī)生發(fā)現(xiàn)視覺衰退的早期跡象。最初聚焦如何讓AI自動診斷糖尿病視網(wǎng)膜病變和年齡相關(guān)黃斑變性。原因是這兩種疾病都是影響大,而且一旦成功就收效很高的案例——相比其他患者,糖尿病患者更可能遭受視力喪失,而年齡相關(guān)性黃斑變性是英國失明最常見的原因;這兩種視力問題,如果能在早期診斷出來,都能提供更有效的治療。
現(xiàn)在,與英國NHS和倫敦的摩爾菲爾茲眼科醫(yī)院(世界上最著名的眼科醫(yī)院之一)合作了兩年后,該研究已經(jīng)展現(xiàn)出希望,成果也預(yù)計在醫(yī)學(xué)期刊發(fā)表。具體說,DeepMind的算法使用摩爾菲爾茲提供的匿名3D視網(wǎng)膜掃描進行訓(xùn)練,訓(xùn)練使用的圖像都經(jīng)過了醫(yī)生的嚴(yán)格標(biāo)記。由于圖像提供了數(shù)百萬像素的豐富數(shù)據(jù)信息,該算法使用機器學(xué)習(xí)分析三種最嚴(yán)重的眼?。呵喙庋?、糖尿病性視網(wǎng)膜病變和年齡相關(guān)性黃斑變性的征兆。
就在2月5日,DeepMind Health的臨床主管Dominic King告訴英國《金融時報》,如果通過同行評審,這項技術(shù)可以在幾年內(nèi)進入臨床試驗階段。King表示:“在像醫(yī)學(xué)影像這樣的特定領(lǐng)域,你可以看到未來幾年內(nèi)我們用人工智能取得巨大的進步……機器學(xué)習(xí)處理更敏感、更具體的問題。”
DeepMind表示,下一階段將通過與倫敦大學(xué)醫(yī)院和倫敦帝國理工學(xué)院合作,分別培訓(xùn)分析放射線掃描和乳房X光的算法。
醫(yī)療是最容易受到AI影響的行業(yè),獨立的AI診斷中心前景可期
普華永道去年10月發(fā)布的名為“探索 AI 革命”的全球AI報告,特別推出了“AI 影響指數(shù)”,對最容易受到 AI 影響的行業(yè)進行了排名。其中,醫(yī)療和汽車并列第一位。
AI影響評分從1-5(1是最低的影響,5最高),醫(yī)療和汽車都是3.7分,并列第一:
而實際上,從 2011 年開始,醫(yī)療領(lǐng)域一直高居 AI 行業(yè)應(yīng)用前列。CB Insights 曾發(fā)布過 AI 應(yīng)用的“行業(yè)熱圖”,可以直觀地看出智能醫(yī)療的火熱程度。
從全球范圍來看,IDC 在其《全球半年度認(rèn)知/人工智能支出指南》中將醫(yī)療人工智能統(tǒng)列為2016年吸引最多投資的領(lǐng)域之一,并表示在未來五年內(nèi),包括醫(yī)療人工智能+診斷和治療系統(tǒng)的使用案例將獲得最大的發(fā)展。在五年期間,它預(yù)測醫(yī)療健康人工智能投資的年復(fù)合增長率為69.3%。
說回到普華永道的最新報告。該報告以“基于數(shù)據(jù)的診斷支持”作為智能醫(yī)療的高潛力用例,認(rèn)為“人工智能最初可能被作為人類醫(yī)生的輔助來采納,而不是替代人類醫(yī)生。這將改善醫(yī)生的診斷,但此過程也為 AI 學(xué)習(xí)提供了有價值的見解,讓其可以不斷學(xué)習(xí)和改進。人類醫(yī)生和 AI 驅(qū)動的診斷之間的這種持續(xù)的相互作用將提高系統(tǒng)的準(zhǔn)確性,并且隨著時間的推移,人類將有足夠的信心完全授權(quán) AI 系統(tǒng)進行自主操作。”
實際上,這一美好前景已展現(xiàn)出了些許萌芽。如依靠計算機視覺的智能醫(yī)療影像識別,已經(jīng)隨著深度學(xué)習(xí)等技術(shù)的使用,來到了“超越人類水平”的臨界點。同時,2017 年 8 月,國家衛(wèi)計委在新聞發(fā)布會上也傳達出一個重要信息:將在已有的 5 類可獨立設(shè)置的醫(yī)療機構(gòu)上,再增加 5 類獨立設(shè)置的醫(yī)療機構(gòu)類別(包括病理診斷中心、康復(fù)醫(yī)療中心等等)。隨著支持社會辦醫(yī)的政策落實,醫(yī)療的“牌照”價值正在下降,未來很有可能出現(xiàn)獨立的 AI 診斷中心,直接為患者提供診斷服務(wù)。
-
谷歌
+關(guān)注
關(guān)注
27文章
6231瀏覽量
108138 -
深度學(xué)習(xí)
+關(guān)注
關(guān)注
73文章
5561瀏覽量
122794
原文標(biāo)題:【谷歌AI以眼識心】超越人類醫(yī)生,從視網(wǎng)膜圖像識別心臟病
文章出處:【微信號:AI_era,微信公眾號:新智元】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
穿戴式心臟病預(yù)防芯片,手機預(yù)測心臟病發(fā)作
中國傳動網(wǎng):超細微傳感器將面世!助醫(yī)生輕松治療心臟病
詳解高危心臟病人遠程實時監(jiān)護系統(tǒng)
有指導(dǎo)的數(shù)據(jù)挖掘技術(shù)在心臟病風(fēng)險評價中的應(yīng)用
糖尿病性視網(wǎng)膜圖像的深度神經(jīng)網(wǎng)絡(luò)分類方法

谷歌利用深度學(xué)習(xí)將眼睛視為個人健康的“指示器”
Google開發(fā)神經(jīng)網(wǎng)絡(luò)系統(tǒng) 可從視網(wǎng)膜辨識疾病
預(yù)防糖尿病視網(wǎng)膜病變研究:研發(fā)模擬人類血液視網(wǎng)膜屏障的微流控芯片
AI可以通過掃描眼睛來分析心臟病風(fēng)險
研究人員用AI分析心臟掃描任務(wù) 準(zhǔn)確率戰(zhàn)勝人類心臟病專家

評論