Quality is life, service is the tenet
病理檢查是癌癥診斷的重要標準,醫生通過(guò)在顯微鏡下觀(guān)察病變組織、細胞,以出具診斷報告。為了提高診斷效率,Google 在顯微鏡上增加了AI和AR組件,讓診斷過(guò)程更為智能。
Google 的研究人員在美國癌癥研究協(xié)會(huì )年會(huì )(ACCR)上發(fā)布報告,以正在評審的論文《一種實(shí)時(shí)自動(dòng)檢測癌癥的增強現實(shí)顯微鏡》,描述了這種增強現實(shí)顯微鏡的原型,改進(jìn)的顯微鏡能從目鏡中直接讀取診斷結果。
以往的診斷過(guò)程中,病理學(xué)家對病變組織的分析可能相當耗時(shí)。此前也已有多家團隊的研究表明,深度學(xué)習在眼科、皮膚科、放射科和病理學(xué)等學(xué)科的診斷上*。Google 也正嘗試利用 AI 技術(shù)提升癌癥診斷效率,也已發(fā)表研究證明神經(jīng)網(wǎng)絡(luò )對淋巴結中乳腺癌轉移的檢測與醫務(wù)人員準確率相當。
除了輔助病變組織的分析,這個(gè)顯微鏡的主要創(chuàng )新之處在于,改進(jìn)了診斷結果獲取的效率。此前的研究中,醫生在顯微鏡下觀(guān)察切片,在計算機上讀取結論,需要在不同設備間來(lái)回切換。Google 的新工具通過(guò)給顯微鏡增設 AR 功能,將診斷結果疊加在切片上,讓醫生能夠在視場(chǎng)中實(shí)時(shí)讀取結論。
左圖:顯微鏡示意圖。數碼相機捕獲與用戶(hù)相同的視場(chǎng),并將圖像傳送到運行 AI 的計算機,結果會(huì )投影到目鏡上的 AR 顯示屏中,切片上就能實(shí)時(shí)顯示相關(guān)標注了。 右圖:臨床光學(xué)顯微鏡改裝得到的顯微鏡原型。
Google 的工具由普通的光學(xué)顯微鏡改進(jìn)得來(lái),經(jīng)簡(jiǎn)單改裝引入 AI 和 AR 組件,因此可以節約成本,利于在小型實(shí)驗室和診所,或發(fā)展中國家中應用。
工具的原理也很簡(jiǎn)單。人工智能的部分同之前的研究如出一轍,訓練神經(jīng)網(wǎng)絡(luò )檢測癌細胞。之后在改進(jìn)顯微鏡下放置組織切片,鏡頭捕捉圖像輸入計算機,讓 AI 檢測組織中的癌細胞,并將虛擬標記投影到目鏡中的 AR 顯示屏,以便醫生觀(guān)察診斷。這個(gè)流程能夠實(shí)時(shí)完成,目前能以每秒 10 幀的速度運行。切片也可以按需隨時(shí)移動(dòng)或縮放,計算結果可以無(wú)縫更新。
不同放大倍率的乳腺癌在淋巴結的轉移。綠色框內為腫瘤組織。
團隊配置了乳腺癌和前列腺癌兩種癌癥的檢測算法,并用綠色輪廓標記出檢測到的腫瘤區域。團隊稱(chēng),基于其它訓練模型,這個(gè)工具還可用于其他癌癥以及結核病和瘧疾等傳染病的檢測,以及顯示更多所需的數據,還能應用于醫學(xué)、生命科學(xué)和材料科學(xué)等學(xué)科。相關(guān)評估需要更深入的研究。
微信掃一掃
關(guān)注我們的官方微信