愛爾眼科數字人“愛科(Eyecho)”正式發佈,支持視頻、文本和語音等多模態交互

10月26日,由愛爾眼科研發的愛爾數字人“愛科(Eyecho)”在東北大學附屬遼寧愛爾眼科醫院區域眼科醫學中心開診儀式上正式發佈。

作爲一款行業領先的科技創新成果,愛爾數字人“愛科(Eyecho)”集合了當今生成式人工智能和計算機圖形學領域目前最爲前沿的技術——基於AIGC與神經渲染的高真實感數字人合成,通過神經渲染技術刻畫高真實感數字人形象;基於檢索增強技術RAG,構建了蘊含眼科領域知識的垂類大語言模型AierGPT;基於自注意力網絡架構,實時根據文本合成個性化聲音;模仿海量自然人體運動的視頻序列,通過文本指引合成自然真實人體運動實現親近互動。

會上發佈了可用於多個場景的愛爾數字人,分別是:面向患者術前教育的實時可交互數字人——“愛爾名醫患教數字人”,可以轉換各醫院各科室醫生的形象,以專業的愛爾眼科垂類大模型爲底座,部署在醫院各科室,面向患者提問,實時回覆包括白內障、屈光、視光、眼底、青光眼、角膜及眼表等全眼科問題。另一款是用於總部大樓、醫院大廳及各類形象展示的虛擬雙語數字人。還有一款可部署在手機端、用於患者術後服務的——“愛爾名醫陪伴數字人”,可支持視頻、文本和語音等多模態交互,也即將投入應用。

“愛科(Eyecho)”的名字既體現愛爾“創新驅動,科技愛爾”的發展戰略,也起英文Echo“迴音”之意,蘊含愛爾運用最新的人工智能技術,提升臨牀效率,提高服務質量,給予患者更好服務回報的理念。

愛爾眼科率先提出“數字眼科”行業發展新模式。聯合中國科學院計算技術研究所等優質科技創新力量,充分挖掘千萬級數據價值,以眼科學及視覺科學融合計算技術與人工智能等交叉學科,佈局兼顧前沿性和應用性的關鍵核心課題,聯動遍佈全球的眼科醫療場景展開示範應用,形成創新資源聚集、產學研協同、數字化賦能的新型科技創新平臺。今日面世發佈的愛爾數字人就是數字眼科的重點科技攻關項目。(茜穎)