這家倫敦醫(yī)療 AI 公司與 Royal College of Physicians,、Stanford Primary Care 和 Yale New Haven Health 的跨國(guó)合作取得重大突破。
Babylon Health 今晚在倫敦 Royal College of Physicians 現(xiàn)場(chǎng)直播的演講中宣布了一項(xiàng)“世界第一”:經(jīng)過(guò)一系列嚴(yán)格的測(cè)試(包括MRCGP考試的相關(guān)部分),,該公司的 AI 已證明其能夠提供堪比臨床醫(yī)生的醫(yī)療建議[1],。
MRCGP 考試是 Royal College of General Practitioners (RCGP) 為實(shí)習(xí)全科醫(yī)生設(shè)立的最終考試。通過(guò)這項(xiàng)考試的實(shí)習(xí)全科醫(yī)生證明他們的能力和臨床技能達(dá)到足夠高的水平,,可以獨(dú)立行醫(yī),。
這項(xiàng)考試重在考查醫(yī)生的診斷能力。
1. 出于監(jiān)管原因,,Babylon 的技術(shù)提供健康信息,,而不是醫(yī)療診斷。測(cè)試以醫(yī)生所做的診斷檢查作為衡量準(zhǔn)確率的基準(zhǔn),但 Babylon 的 AI 服務(wù)仍然是一種信息服務(wù),,而不是醫(yī)療診斷,。
Babylon 從公開(kāi)可用的 RCGP 來(lái)源[2]中選取了一些具有代表性的診斷技能試題以及獨(dú)立出版的備考資料,并與當(dāng)前的 RCGP 課程相對(duì)照,,確保盡可能接近實(shí)際的 MRCGP 考題,。
過(guò)去五年里,醫(yī)生的平均合格分?jǐn)?shù)為72%[3],。第一次參加考試,,Babylon 的 AI 便達(dá)到81%。隨著 AI 繼續(xù)學(xué)習(xí)和積累知識(shí),,Babylon 預(yù)計(jì)在接下來(lái)的考試中將有明顯進(jìn)步,。
雖然考試很重要,但醫(yī)生在日常實(shí)踐中會(huì)接觸到更廣泛的疾病和癥狀,。因此,,為了進(jìn)一步測(cè)試 AI 的能力,Babylon 的科學(xué)家,、臨床醫(yī)生和工程師團(tuán)隊(duì)與 Royal College of Physicians,、Megan Mahoney博士(Stanford University 初級(jí)護(hù)理和人口健康部門(mén)大眾初級(jí)護(hù)理主任)和 Arnold DoRosario 博士(Yale New Haven Health 首席人口健康官)合作,使用100個(gè)獨(dú)立設(shè)計(jì)的癥狀集,,對(duì) Babylon 的 AI 和七名經(jīng)驗(yàn)豐富的初級(jí)護(hù)理醫(yī)生進(jìn)行測(cè)試,。
Babylon AI 的準(zhǔn)確率得分為80%,而七名醫(yī)生則為64-94%,。
在初級(jí)護(hù)理醫(yī)學(xué)最常見(jiàn)的病癥方面,,AI 的準(zhǔn)確率為98%。相比之下,,當(dāng) Babylon 的研究團(tuán)隊(duì)使用相同的方法對(duì)有經(jīng)驗(yàn)的臨床醫(yī)生進(jìn)行評(píng)估時(shí),,他們的準(zhǔn)確率為52-99%。
2. 由于 RCGP 不公開(kāi)過(guò)去的考卷,,Babylon 在 AI 備考和測(cè)試中使用了例題,,其中一些由學(xué)院直接出版,一些來(lái)自公開(kāi)可用的資源(所有均作參考),。
3. 實(shí)習(xí)全科醫(yī)生的平均 CSA 合格分?jǐn)?shù)使用2012年至2017年期間的公開(kāi) RCGP 考試結(jié)果數(shù)據(jù)進(jìn)行計(jì)算,。
值得注意的是,AI 的安全性為97%,,高于醫(yī)生的平均值93.1%。
談到今晚的新聞,,Babylon 創(chuàng)始人兼首席執(zhí)行官 Ali Parsa 博士表示:
“據(jù)世界衛(wèi)生組織估計(jì),,全球醫(yī)生缺口超過(guò)500萬(wàn),導(dǎo)致全球逾一半人口無(wú)法獲得最基本的醫(yī)療服務(wù),。即使是在最富有的國(guó)家,,初級(jí)護(hù)理也變得越來(lái)越負(fù)擔(dān)不起,,而且不方便,往往需要漫長(zhǎng)的等待時(shí)間,,讓他們無(wú)法立即得到醫(yī)治,。Babylon 的最新 AI 能力表明,不論地理,、財(cái)富或環(huán)境,,任何人都能免費(fèi)獲得堪比頂尖臨床醫(yī)生的醫(yī)療建議。
“今晚的結(jié)果清楚地表明 AI增強(qiáng)健康服務(wù)可以減輕全世界醫(yī)療系統(tǒng)的負(fù)擔(dān),。我們的使命是將便利實(shí)惠的健康服務(wù)提供給每個(gè)人,。這些意義重大的結(jié)果使人類(lèi)向?qū)崿F(xiàn)人人都能獲得安全準(zhǔn)確的醫(yī)療建議的世界邁進(jìn)了一大步?!?/p>
Babylon 的研究論文《evaluation of AI Powered Symptom Checker》可從該公司的網(wǎng)站下載,,并將在未來(lái)幾天通過(guò)ArXiv.com公布。