2019年9月24日,Vive開發者聚會和Vive行業生態大會在北京和上海兩地同時舉辦,由七鑫易維研發設計生產的適配Cosmos頭顯的Droolon F1眼球追蹤產品成為HTC官方合作配件,于今日首發亮相兩場大會。
(Droolon F1眼球追蹤配件)
Droolon F1只需將USB線和Cosmos預留的USB口連接即可使用,提供雙眼同步數據,準確度誤差小于0.5°,追蹤范圍覆蓋Cosmos整個視野,標準版本具有120Hz采樣率,可定制提升至240Hz。
(Droolon F1安裝在Cosmos上的效果)
七鑫易維早在2016年底即推出了適配HTC Vive的眼球追蹤配件產品aGlass DKI,后經過升級迭代,在2017年推出了aGlass DKII, 并在2018年適配了HTC Vive Pro。Droolon F1已經是七鑫易維面向HTC VR頭顯推出的第三代眼球追蹤配件產品,技術已全面升級,和之前產品相比,體積更小,裝配更加方便。
(三代產品:aGlass DKI、aGlass DKII、Droolon F1)
與先前aGlass采用七鑫易維自有眼球追蹤API不同,這次Droolon F1的SDK采用HTC官方眼球追蹤API,這意味著開發者在開發眼球追蹤相關應用后,可適用于所有HTC帶有眼球追蹤功能的VR產品。
眼球追蹤既是一種重要的VR交互方式,也是一種重要的用戶數據,所以Droolon F1可以讓Cosmos的開發者探索更多的應用場景和交互模式。
眼球追蹤,給VR交互更多驚喜
VR是一種沉浸式的體驗,必定追求和真實世界中完全一致的交互方式,所以未來的VR交互,將是眼、手、口結合的多模態自然交互。其中,眼睛作為在真實世界中“指向”的第一手段,在VR中取代手柄的射線將會成為一種趨勢,基于手柄射線觸發的各種交互也就可以用眼睛視線取代。
(用眼睛進行選擇)
眼球追蹤不僅僅可以提供注視點坐標,還可以提供眼皮距離、瞳孔位置、瞳孔尺寸等,所以VR社交中應用眼球追蹤技術,可以將用戶的眼睛動作完整復現出來,比如眨眼睛、瞇眼睛、瞪眼睛等,甚至白眼、媚眼都可以完美復現,這會使得VR社交應用中Avatar與用戶保持完全一致的表情動作,實現真正沉浸式的VR社交體驗。
(VR社交中Avatar眼部動作的完美復現)
開發者可以用眼球追蹤技術做出更加新穎和有趣的交互探索,甚至可以結合AI技術,判斷分析用戶的交互意圖,從而實現更加自然和深入的交互,甚至給用戶一種Surprise的感覺。
眼動數據分析,掌握用戶視覺習慣
作為用戶數據,眼球追蹤則可以分析用戶的注意力、興奮度、疲勞度等,用于用戶消費習慣分析、心理狀態分析等,還有很多B端專業領域的特殊應用:如在心理健康領域,可用于一些心理問題的篩選;在視覺訓練領域,可用于診斷和康復的數據依據;在教育領域,可用于學生注意力的分析乃至VR課件的質量分析。
(眼動數據分析熱力圖)
注視點渲染,給用戶更好視覺體驗
除了交互和數據,眼球追蹤還有一些特殊應用,如注視點渲染可以降低GPU的壓力,提升VR應用渲染幀率,IPD(瞳距)自動檢測則可以使VR的IPD匹配用戶的IPD,從而提升用戶的體驗舒適性。
(結合NVIDIA VRS技術實現的注視點渲染)
此外,Droolon F1在設計上考慮了對VR頭顯產品的通用適配性,所以除了Cosmos外,Droolon F1還將適配HTC Vive、Vive Focus、Vive Focus Plus等產品。
(新聞稿 2019-09-24)