云知聲受邀出席2023未來醫(yī)療科技大會，解密生成式AI在醫(yī)療場景中的落地應(yīng)用

　　11月30日-12月1日，2023未來醫(yī)療科技大會在合肥舉辦。大會以“無人之境”為主題，匯聚了近百位大咖嘉賓，聚焦智能醫(yī)療設(shè)備、基因測序、生物技術(shù)、生成式AI與醫(yī)療場景的結(jié)合等細分領(lǐng)域，為行業(yè)帶來一場產(chǎn)業(yè)思想交流盛宴。

　　作為大會核心論壇之一，生成式AI創(chuàng)新場景應(yīng)用論壇于12月1日如期舉行。行業(yè)專家學者、頭部 AI 企業(yè)、頂尖投資人齊聚一堂，深度解讀生成式 AI 最新應(yīng)用和未來發(fā)展機遇。云知聲IoT事業(yè)部、智慧醫(yī)療事業(yè)部總裁謝冠超應(yīng)邀出席論壇并發(fā)表《生成式AI在病歷生成場景中的應(yīng)用》主題演講。

　　深耕人工智能產(chǎn)業(yè)多年，云知聲一直密切關(guān)注AI前沿技術(shù)在醫(yī)療領(lǐng)域的創(chuàng)新應(yīng)用。入局智慧醫(yī)療賽道以來，云知聲針對醫(yī)療行業(yè)各場景痛點，陸續(xù)研發(fā)推出了語音電子病歷、智能病歷質(zhì)控、單病種質(zhì)控、智能醫(yī)保審核等多款智慧醫(yī)療產(chǎn)品，覆蓋醫(yī)政醫(yī)管、臨床診療、醫(yī)保管理、患者服務(wù)等多個醫(yī)療業(yè)務(wù)環(huán)節(jié)，山海大模型發(fā)布后，云知聲更是全面升級了醫(yī)療業(yè)務(wù)線各產(chǎn)品智能化水平，發(fā)布門診病歷生成系統(tǒng)、手術(shù)記錄撰寫助手、商保智能理賠系統(tǒng)等醫(yī)療產(chǎn)品應(yīng)用，實現(xiàn)從助手到專家的躍遷。

　　現(xiàn)場，謝冠超基于過往云知聲在智慧醫(yī)療領(lǐng)域的技術(shù)探索與經(jīng)驗積累，深度分享了生成式AI在病歷生成場景中的應(yīng)用。

　　PART 1

　　門診病歷生成系統(tǒng)：山海大模型在醫(yī)療場景的落地應(yīng)用

　　門診病歷是對患者疾病發(fā)生、發(fā)展、轉(zhuǎn)歸、檢查、診斷、治療過程的記錄;是臨床實踐工作的總結(jié)，是探索疾病規(guī)律的依據(jù)，也是進行臨床科研和知識發(fā)現(xiàn)的寶貴資料。

　　規(guī)范和完善病歷質(zhì)量，對預防醫(yī)療糾紛發(fā)生，保護醫(yī)務(wù)人員的合法權(quán)益，規(guī)范門診醫(yī)療行為、改善醫(yī)療服務(wù)、提高醫(yī)療質(zhì)量具有重要意義。

　　然而，對于門診醫(yī)生而言，每個門診單元(四個小時)要接診30-40個患者，平均每個患者6-8分鐘;平均每份病歷150-200字，錄入時間為1.5min-2min。在接診工作、病歷錄入工作如此繁復的情況下，很難完成高質(zhì)量的門診病歷。

　　為解決這一痛點，云知聲以山海大模型為技術(shù)底座，應(yīng)用前端聲音信號處理、智能語音識別等技術(shù)，結(jié)合龐大的醫(yī)療知識圖譜，打造門診病歷生成系統(tǒng)，一鍵生成門診病歷。

　　具體來講，云知聲先是通過噪音抑制、回聲消除等技術(shù)，精準捕捉醫(yī)患對話并對其進行角色分離，再依托山海大模型，智能抓取對話中的關(guān)鍵問診信息，對其進行標準化、結(jié)構(gòu)化處理，從而形成準確、簡潔的醫(yī)療摘要，經(jīng)醫(yī)生審核修改后，即可生成符合病歷書寫規(guī)范的標準病歷。

　　在云知聲門診病歷生成系統(tǒng)的助力下，門診病歷的規(guī)范性、完整性大幅提升，病歷內(nèi)容更加詳實、準確，醫(yī)生只需在系統(tǒng)生成的病歷上稍作修改即可完成最終病歷，有效提升門診效率，切實為醫(yī)生減負的同時，也大幅提升了患者的就診體驗。

　　作為支撐云知聲門診病歷生成系統(tǒng)的技術(shù)底座，山海大模型在醫(yī)療領(lǐng)域的表現(xiàn)頗為出色——MedQA任務(wù)達87.1%，超越Med-PaLM 2;臨床執(zhí)業(yè)醫(yī)師資格考試達523分(總分600分)，超過99%的考生水平;在 CCKS 2023 PromptCBLUE醫(yī)療大模型評測中，云知聲也憑借基于山海大模型孵化的UNIGPT-MED 模型獲通用賽道一等獎。

　　亮眼成績的背后，是云知聲對模型專業(yè)能力的極致打磨。針對低容錯率的醫(yī)療場景，云知聲從預訓練、微調(diào)、推理、知識插件機制四個方面發(fā)力，打造更“懂”醫(yī)療場景的大模型：

　　● 預訓練階段

　　基于山海大模型通用底座，利用海量醫(yī)療語料(包括醫(yī)療教材，臨床指南，醫(yī)院病歷等)做增量預訓練，提高模型的醫(yī)學語言理解和生成能力。

　　● 微調(diào)階段

　　優(yōu)選歷年醫(yī)學考試題目對山海醫(yī)療基座模型做微調(diào)，提高模型的醫(yī)學考試能力。

　　● 推理階段

　　利用思維鏈技術(shù)注入解題思路過程，提高模型的醫(yī)學推理能力。

　　● 知識插件機制

　　通過使用多年來積累的醫(yī)學知識圖譜，可以動態(tài)地檢索與問題相關(guān)的醫(yī)學知識。這些知識可以作為背景知識，與大模型中的參數(shù)化知識相結(jié)合，從而提高模型在醫(yī)學領(lǐng)域的知識水平。

　　目前，基于山海大模型打造的門診病歷生成系統(tǒng)已在北京友誼醫(yī)院落地試用，也先后榮獲北京市首批人工智能行業(yè)大模型應(yīng)用案例、2023北京人工智能行業(yè)賦能典型案例等榮譽獎項，大模型技術(shù)實力與場景落地能力得到業(yè)界高度認可。

　　PART 2

　　“做比想要困難很多”，病歷生成系統(tǒng)落地過程中面臨的實際挑戰(zhàn)

　　從產(chǎn)品設(shè)想，到落地實施，一個產(chǎn)品的誕生從不是一蹴而就的。在門診病歷生成系統(tǒng)的落地過程中，云知聲主要面臨以下挑戰(zhàn)：

　　一是診室環(huán)境復雜。在我們理想的問診場景中，每個診室是一醫(yī)一患的面對面溝通。而在實際場景中，每個診室可能有多位醫(yī)生同時坐診，且部分患者需要家屬陪同。而在問診過程中，醫(yī)生有時需要跟患者接觸，位置會隨之移動，這也為語音收錄和角色分離增加了難度。為解決以上問題，云知聲門診病歷生成系統(tǒng)的語音方案針對不同診室環(huán)境，采取靈活定制的方式，最大程度上確保了麥克風的拾音效果。

　　二是醫(yī)患對話不規(guī)范。存在醫(yī)療表達難理解、醫(yī)患對話重疊、醫(yī)患對話中有第三人(陪診)等難點。為適應(yīng)這種不規(guī)范，云知聲針對真實醫(yī)患進行場景化的識別模型訓練，并采用分聲道拾音技術(shù)對醫(yī)患對話進行識別，識別后“重新組合”醫(yī)患對話。

　　三是輸出內(nèi)容不受控。雖然大模型對醫(yī)患對話的理解和摘要是正確的，但患者表述涉及多個時間線，可能會有多次重復，甚至是前后矛盾，大模型需要判斷和選擇正確的內(nèi)容給予輸出;同時符合事實的正確摘要也不能直接輸出符合書寫規(guī)范的病歷，這一步的生成也是不受控的，大模型需要在理解輸入的基礎(chǔ)上，結(jié)合嚴格的病歷書寫規(guī)范進行輸出。

　　基于對醫(yī)療場景的深刻理解和多年的技術(shù)、數(shù)據(jù)儲備，云知聲能夠快速挖掘醫(yī)療場景落地過程中的具體痛點并給出解決方案，這也是門診病歷生成系統(tǒng)得以迅速落地的重要原因。

　　門診病歷生成是整個病歷生成的一個環(huán)節(jié)，而不是全部;是一個開始，而不是結(jié)束。

　　面向未來，云知聲山海大模型將從醫(yī)患對話擴展到醫(yī)生對話場景，從對話擴展到獨白場景，從語音輸入擴展到全模態(tài)全數(shù)據(jù)輸入，進而覆蓋全部病歷文書撰寫場景，幫助醫(yī)生擺脫繁重的文書撰寫工作，減輕醫(yī)生壓力的同時，也讓醫(yī)生有更多的時間和精力去服務(wù)患者，全面提升患者就診體驗。

　　大會期間，云知聲門診病歷生成系統(tǒng)、手術(shù)記錄撰寫助手等醫(yī)療產(chǎn)品應(yīng)用悉數(shù)亮相展會，充分展示了山海大模型落地智慧醫(yī)療領(lǐng)域的最新創(chuàng)新成果，讓與會者看到了生成式AI與醫(yī)療場景結(jié)合的更多可能。

（責任編輯：華康）