來源:器械之家
美國3月18日,強生醫療科技宣布與英偉達(Nvidia)達成合作協議,雙方將聯手開發新的人工智能應用程序。
根據協議內容,強生將獲得使用英偉達IGX邊緣計算平臺和Holoscan邊緣AI平臺的權限。旨在通過利用英偉達的計算平臺和人工智能技術,支持手術軟件和設備在手術室內進行實時數據分析,從而推動手術水平的提升。
與此同時,雙方還計劃將AI技術應用于醫療影像解析和疾病診斷領域。這將為醫生提供更全面的醫療信息,幫助他們更快速地做出準確的診斷和治療決策。
此外,該合作還將涉及到醫療教育和培訓領域。通過利用英偉達的虛擬現實和增強現實技術,醫學生和醫生可以進行更真實、更有效的培訓,提升他們的技能水平和專業素養。
強生醫療科技全球數字負責人Shan Jegatheeswaran表示:“手術中擴展人工智能的主要挑戰之一是手術技術的封閉性。將先進的邊緣計算硬件和軟件引入到手術室,可以實現創新的可擴展性和新的AI驅動解決方案,用于臨床決策、教育和培訓以及協作,最終目標是推進患者護理。”
01
醫療邊緣AI NVIDIA IGX
據悉,NVIDIA IGX是英偉達為邊緣計算應用而設計的一種先進硬件和軟件解決方案,集成了英偉達的最新AI技術,包括深度學習算法和神經網絡模型,使設備具備智能化的能力。旨在為各種領域,包括醫療領域,提供強大的人工智能(AI)功能和實時數據處理能力。
對于醫療行業的邊緣 AI 用例,IGX提供安全、低延遲的AI推理,以滿足臨床對醫療程序中的一系列儀器和傳感器獲得即時洞察的需求,例如機器人輔助手術、患者監測系統等。
NVIDIA IGX 平臺
此外,IGX平臺可支持用于醫療設備的實時AI計算平臺——NVIDIA Clara Holoscan,助力醫療設備開發者接合邊緣、本地數據中心與云服務,實現新設備的快速開發和部署,將 AI 應用直接送入手術室,全球每年有超過3億例手術在這里進行。
Holoscan平臺結合了用于低延遲傳感器和網絡連接的硬件系統、用于數據處理和人工智能的優化庫,以及運行流媒體、成像和其他應用程序的核心微服務,從嵌入式到邊緣到云。
它可以通過高吞吐量數據傳輸和處理使得數據實時處理成為現實。比如,病理數據的實時分析。病理圖像數據量極其龐大,甚至高達數TB。基本不可能對病理數據進行實時分析。借助Clara Holoscan平臺,研究人員將癌細胞病理圖像的分析時間從2天變為實時,并首次實時發現了單個癌細胞分裂為三個癌細胞的畫面。
更新25個醫療微服務
值得注意的是,在與強生簽署合作協議的同一天。英偉達還推出了全新的AI推理服務器——Nvidia NIM,這是一款新的軟件平臺,旨在簡化定制和預先訓練的 AI 模型在生產環境中的部署。通過NIM,用戶可以體驗各種AI模型和應用,同時保留對知識產權的完全控制。
醫療行業公司可以基于這些微服務,篩選數萬億種藥物化合物,收集更多的患者數據以幫助早期疾病檢測,或者實施更智能的數字助理等等。
02
強生發力人工智能
作為全球最大、最多元化的醫療健康企業,強生曾長期位居全球醫療器械龍頭老大地位,不過后來被美敦力實現反超。近年來,公司正不斷在手術機器人領域開始發力,試圖將自己轉變為外科手術機器人巨頭。
在此前1月的財報電話會議上,強生首席財務官喬Joe Wolk曾表示,公司目前正在尋找機會,無論是通過人工智能還是整體基礎設施,來進一步改善醫療科技的盈利狀況。
此次合作的首要目標,也是將英偉達的這兩項平臺融入強生的外科技術產品組合中,為其產品打造更好、更智能的AI產品。目前來看,強生醫療科技的手術機器人產品包括Monarch經人體自然腔道診療機器人、VELYS骨科手術機器人等。
Monarch經人體自然腔道診療機器人
Monarch是國內首款獲批的經自然腔道診療機器人,適用于經支氣管的診療。
作為是全球領先的數字化手術平臺,Monarch應用了全球首款的全程可視、電磁導航、虛擬重建“三合一”導航的內窺鏡技術,內窺鏡進入人體后,可連續顯像,提供全面清晰的術中視野。并且以柔性支氣管鏡驅動,可輕松抵達深部病灶。控制器是一個形似游戲手柄的遙控,能夠精準靈活地操作,柔性支氣管鏡可實現360°角度調節。
目前Monarch系統的初始版本上已獲得FDA許可和CE標志,但并不是商業版本,2023年9月19日,Maestro商業版本獲得了CE批準,預計在未來幾個月內Maestro商業版本將獲得FDA的批準。強生的計劃是,2024年在美國市場進行有限的發布,然后在2025年進行更大規模的商業化動作。
VELYS骨科手術機器人
VELYS骨科手術機器人是同類產品中首個具有便攜式設計,可安置在手術床邊的產品,支持即插即用。能集成到任何手術室環境。其系統具有良好的規劃能力,優化醫生手術流程,并適應醫生手術習慣。
VELYS™可以幫助外科醫生在全膝關節置換術中準確切除骨骼,使植入物相對于軟組織對齊和定位,而不需要術前成像。讓外科醫生無需使用一次性器械,大幅度降低手術成本。
它不僅是機器人系統,集成智能平臺和ATTUNE Total Knee System,VELYS™能夠形成一整套解決方案,系統輔助醫生評估膝關節的骨解剖和軟組織包膜,協助規劃最佳的假體植入位置,平衡間隙數據有助于骨科醫生可視化和預測關節穩定性,機器人系統則輔助醫生來執行手術計劃。
03
英偉達跨界醫療
這已經不是英偉達第一次與械企合作,聯手布局醫療市場了。
此前,Activ Surgical、Moon Surgical和Proximie三家領先的醫療設備初創公司已經選擇在IGX平臺上運行的NVIDIA Clara Holoscan組合來驅動他們的外科機器人系統。
另外,美敦力也曾選擇與英偉達合作,將其醫療級Holoscan和IGX平臺嵌入到GI Genius AI 輔助結腸鏡檢查系統中,為醫生提供AI增強的診斷圖像。
美敦力
今年3月,美敦力曾宣布將與芯片制造商英偉達(Nvidia)合作,將其醫療級實時AI計算軟件平臺NVIDIA Holoscan和工業級邊緣AI硬件平臺NVIDIA IGX嵌入到GI Genius AI 輔助結腸鏡檢查系統中,為醫生提供AI增強的診斷圖像。Holoscan通過在邊緣提供可擴展、軟件定義的流媒體數據處理所需的全棧式基礎設施,助力將新的AI應用引入臨床環境。
憑借NVIDIA Holoscan和IGX平臺,開發者能夠在Cosmo創新中心內高效訓練和驗證AI模型,然后將AI賦能的應用托管于美敦力的軟件即醫療設備(SaMD)應用市場——GI Genius AI Access平臺上,使軟件定義醫療設備成為了可能。
Activ Surgical
Activ Surgical選擇NVIDIA Clara Holoscan來加速其人工智能和增強現實解決方案的開發,以實現實時手術指導。這家總部位于波士頓的公司的ActivSight技術允許外科醫生查看肉眼無法看到的關鍵生理結構和功能,如血流。
Activ Surgical希望通過增強現實,人工智能和機器學習技術來徹底改變外科治療方式。其中,這家公司的手術智能平臺ActiveEdge可以通過基于人工智能的大數據分析能力來增強外科醫生的手術決策能力,從而減少意外的手術錯誤;ActivSight成像模塊則旨在無縫升級現有手術室設備,充當ActiveEdge平臺的“眼睛”,并允許外科醫生通過AR技術來在手術過程中訪問關鍵的視覺數據。
據介紹,美國和歐洲的多個主要醫院網絡已就Activ Surgical的產品進行試點,而ActivSight成像模塊將于2022年進行廣泛上市。
Moon Surgical
總部位于巴黎的機器人手術公司Moon Surgical正在設計Maestro,這是一個可訪問的自適應手術輔助機器人系統,可以與手術室已經到位的設備和工作流程配合工作。該公司已經能夠將其工程資源集中在人工智能算法和其他獨特功能上,采用Clara Holoscan節省了他們的時間和資源,幫助他們壓縮了開發時間表。
Maestro其實是一個協同操作機器人平臺(非類似于達芬奇手術機器人一樣),為外科醫生提供穩定的回縮、相機固定和兩個額外的手臂,外科醫生始終控制手臂,并可以以任何需要的方式定位它們,安全可靠。公司目前正在開發一種術中相機跟蹤軟件,該軟件將使相機臂能夠自動跟蹤外科醫生操縱的器械。此外,嵌入式房間感應(相當于高分辨率"監視")攝像頭跟蹤外科醫生的運動和手術室環境,以便能夠在手術開始之前最終自動將手臂定位在最佳配置中。
Moon Surgical
Proximie
總部位于倫敦的Proximie正在建立一個遠程呈現平臺,以實現實時的遠程外科醫生協作。Clara Holoscan將允許該公司在手術室中提供本地視頻處理,提高用戶的性能,同時維護數據隱私并降低云計算成本。
Proximie創始人兼首席執行官Nadine hach-Haram博士表示:“我們很高興與英偉達合作,加強健康生態系統,推進我們在全球范圍內連接手術室的使命。“由于這種合作,我們能夠提供盡可能身臨其境的體驗,并提供彈性數字解決方案,讓世界各地的手術室設備能夠相互通信并獲取寶貴的見解。”
Proximie已經在世界各地的500多個手術室中部署,迄今為止已經記錄了數萬例外科手術。
--
通過結合強生在醫療科技領域的深厚經驗和NVIDIA在人工智能領域的領先技術,我們有望看到更多創新的醫療解決方案。兩家巨頭強強聯手不僅能夠推動醫療設備的智能化和數據分析能力的提升,還將為整個醫療行業的數字化轉型和未來創新提供無限可能。