HoloLens開發(fā)+眼球跟蹤Pupil Labs用于改進(jìn)醫(yī)療手術(shù)訓(xùn)練

一、傳統(tǒng)醫(yī)療手術(shù)訓(xùn)練的不足之處

為保證手術(shù)安全實(shí)施,實(shí)習(xí)醫(yī)生必須熟練掌握一系列的多階段手術(shù),還需要記憶很多詳細(xì)的分布說明,而在學(xué)習(xí)過程中,時(shí)不時(shí)需要停下手上的操作,重新記憶和閱讀學(xué)習(xí)說明書。基于這個(gè)問題, 阿爾伯塔大學(xué)手術(shù)模擬研究實(shí)驗(yàn)室的研究人員開始使用增強(qiáng)現(xiàn)實(shí)技術(shù)來改進(jìn)手術(shù)訓(xùn)練方法。將Hololens 和 Pupil Labs的Pupil Labs HoloLens Add-on附件相結(jié)合,讓Hololens具備眼球跟蹤功能。

二、功能

根據(jù)眼動(dòng)跟蹤來指導(dǎo)增強(qiáng)現(xiàn)實(shí)系統(tǒng),提供手術(shù)程序指令。

  • 系統(tǒng)自動(dòng)檢測人眼在指令區(qū)域內(nèi)的移動(dòng)
  • 若檢測到人眼移動(dòng)到指令區(qū)域,系統(tǒng)將顯示手術(shù)程序步驟指令
  • 人眼離開時(shí),移除指令

三、優(yōu)點(diǎn)

使用簡單,只需通過移動(dòng)眼鏡來傳達(dá)指令,無縫式體驗(yàn)使培訓(xùn)效率提高,實(shí)習(xí)醫(yī)生可以更加專注于手術(shù)訓(xùn)練過程。