速途網訊 今日，智慧眼砭石大模型發布會舉行。智慧眼創始人、董事長邱建華，人工智能研究院院長Dr. Andrew Zuo出席，現場展示了砭石大模型多項核心技術能力，并發布智慧眼在醫療健康行業應用成果。

現場，邱建華實測了砭石的智能問診、輔助閱片、面診舌診、生理指標預測、睡眠監測五大技能，多項診療建議躍然于屏，充分展現了砭石在中西醫相結合，多模態相融合的全新交互體驗。

據介紹，智慧眼在構建砭石大模型的過程，實現了以下三方面創新。? ? ??

一、采用知識圖譜與大模型相結合的技術路線，提升醫療診斷準確性。我們知道，知識工程和大模型是當前實現認知智能的兩個主要的途徑，兩者各有優劣，醫學領域非常尊重循證，在醫療決策中將臨床證據、個人經驗與患者的實際狀況和意愿三者相結合。我們這里，通過在訓練過程中加入知識圖譜對訓練過程進行知識增強，結合RLHF技術，在500億參數條件下比單純使用大模型技術，醫學問題回答準確度提升近10%。

二、隱私計算條件下的大模型聯邦訓練，充分釋放高質量數據要素價值。眾所周知，高價值醫療數據都是在醫院等高價值行業用戶手中，如何實現這些高價值用戶的敏感隱私數據的脫敏，真正做到數據的“可用不可見”、“數據不出域”安全應用是極具挑戰性的問題。在這里，我們解決了保護隱私的分布式知識遷移和聯邦圖譜推理的問題，可以實現分布式數據孤島的知識匯聚，以及基于分布式數據的聯邦大模型訓練，支撐了用戶數據價值的釋放。? ? ??

三、醫療領域多模態視覺處理技術，實現多樣化任務。砭石醫療大模型，它是醫療領域多模態生成式預訓練大模型，能夠支持醫療領域多模態的輸入，包括醫療領域文本、圖像、視頻和音頻形式的輸入，具體形式覆蓋智能問診，輔助閱片，面診舌診，生理指標預測，睡眠監測幾個方面，它的輸出是結構化的文本，包括健康狀態的簡要描述、診斷描述和治療建議等，可以方便醫療機構更好地理解分析，提高了醫療信息處理的效率和準確性。

具體來說，在文本方面，輔助醫生和藥師與患者對話；在視頻方面，通過捕捉人臉表面周期變化由于心臟跳動所帶來的面部變化來實現對心率、呼吸率、心率變異性、血壓、血氧等生理指標測量；在圖片方面，統一范式能夠進行高準確度的醫學影像閱片和面診舌診；在音頻方面，實現基于對睡眠音頻數據的分析來檢測用戶的睡眠情況。