FBEC2023 | 七鑫易維 副總裁路偉成:XR眼球追蹤的幾大關(guān)鍵落地場景
來源:網(wǎng)絡(luò) 時(shí)間:2023-12-13 16:49 作者:hj 訪問量:596 我要投稿FBEC2023未來商業(yè)生態(tài)鏈接大會暨第八屆金陀螺獎(jiǎng)于2023年12月8日在深圳福田大中華喜來登酒店6樓盛大召開,本次大會由廣東省游戲產(chǎn)業(yè)協(xié)會、深圳市互聯(lián)網(wǎng)文化市場協(xié)會指導(dǎo),陀螺科技主辦,中國光谷、游戲陀螺、VR陀螺、陀螺財(cái)經(jīng)、陀螺電競聯(lián)合主辦。
大會以“合力共生·韌者行遠(yuǎn)”為大會主題,以具有行業(yè)前瞻洞察的“航行者”為視角,破冰之旅為主線,關(guān)注AI、元宇宙、XR、游戲、電競、數(shù)字經(jīng)濟(jì)等科技與互聯(lián)網(wǎng)前沿領(lǐng)域,全方位呈現(xiàn)科技前沿成果,聚焦時(shí)代與商業(yè)熱點(diǎn)議題,探討新科技、新商業(yè)、新模式的未來價(jià)值,與真正的勇者共赴劇變革新下的凜冬破冰之旅!
主會場C:元生未來,共鏈價(jià)值——2023全球元宇宙產(chǎn)業(yè)核心技術(shù)論壇,邀請到七鑫易維 副總裁路偉成帶來主題為“XR眼球追蹤的關(guān)鍵點(diǎn)”的精彩演講。路偉成認(rèn)為,XR眼球追蹤的幾大關(guān)鍵落地場景有:注視點(diǎn)渲染、瞳距(IPD)調(diào)節(jié)、表情追蹤(+反向透視)、交互、身份識別、眼動數(shù)據(jù)分析以及虛實(shí)對齊與消除VAC。
以下為演講實(shí)錄:
大家,下午好!我是七鑫易維的路偉成,今天和大家分享的主題是XR眼球追蹤的幾個(gè)關(guān)鍵問題,集中闡述XR眼球追蹤的應(yīng)用場景。
XR眼球追蹤的時(shí)代已經(jīng)到來,全球領(lǐng)軍消費(fèi)電子公司蘋果,第一款XR產(chǎn)品Vision Pro就集成了眼球追蹤。而除了蘋果之外,主流的XR品牌幾乎全部推出了集成眼球追蹤的XR型號,如Meta Quest Pro、PICO 4 Pro等。具體來看,XR眼球追蹤的落地場景有:
(1)注視點(diǎn)渲染。加了眼動的VR,基本都會加注視點(diǎn)渲染。Vision Pro發(fā)布,VR、MR的分辨率都向蘋果看齊,超高分辨率意味著渲染壓力非常大,而注視點(diǎn)渲染則可以大幅度降低渲染壓力,如《Red Matter 2》登陸Quest Pro后,像素密度比之前提升了33%(等同于視覺中心的像素?cái)?shù)量增加了77%),文字清晰度、光影和色彩表現(xiàn)足夠優(yōu)秀,突破了Quest頭顯的圖形極限。再看PSVR2使用動態(tài)照明和陰影等高要求的圖形質(zhì)量下,渲染和計(jì)算跟蹤的幀時(shí)間從33.2ms下降到14.3ms,運(yùn)行一個(gè)4K的飛船Demo演示時(shí),CPU線程性能和GPU幀時(shí)間分別快了32%和14%。最后總結(jié)下來就是注視點(diǎn)渲染提高GPU幀數(shù)達(dá)2.5倍,注視點(diǎn)渲染+眼球追蹤可提高3.6倍,由此注視點(diǎn)渲染是剛需。
(2)IPD調(diào)節(jié)。加了眼動的VR基本都加了IPD,Vision Pro也加了,但是在發(fā)布會上并沒有提。用戶感知不到的東西,蘋果就不會提,感知不到的技術(shù)是最好的技術(shù),就像空氣一樣使用它就可以。七鑫易維早在2018跟歌爾合作的時(shí)候,就推出了自動的IPD的調(diào)節(jié)。
(3)表情追蹤。目前的落地情況,只要加了眼動,肯定都能實(shí)現(xiàn)表情追蹤,Vision Pro還額外加了個(gè)反向透視。七鑫易維很早就實(shí)現(xiàn)了通過眼球追蹤進(jìn)行表情追蹤的功能,可以把人的表情,眼部表情都表現(xiàn)出來。這已經(jīng)是落地的場景,在VR的社交類應(yīng)用或者是遠(yuǎn)程會議等都用得到。
(4)身份識別和認(rèn)證。目前用得比較少,僅Vision Pro和HoloLens2用了,運(yùn)用虹膜識別作為身份識別的方式。虹膜識別和眼球追蹤實(shí)際上是可以統(tǒng)一到一起的,因?yàn)橛布捎玫氖且惶?。虹膜識別是我們認(rèn)為目前最合適XR身份認(rèn)證的方式。為什么會這么說?主要因?yàn)楹缒ぷR別已經(jīng)有眼球追蹤不需要額外加其他的套件。眼球追蹤是很好的活體識別方式,提升了虹膜識別的安全性,虹膜識別還能給眼球追蹤提供身份信息,當(dāng)切換用戶的時(shí)候可以自動切換眼球追蹤的參數(shù)。這方面我們已與微信支付、創(chuàng)維XR推出了整體的虹膜識別和眼球追蹤的XR方案,預(yù)計(jì)年底或明年初可以實(shí)現(xiàn)量產(chǎn)。
(5)交互。幾年前我們就講,眼手口多模態(tài)自然交互是XR交互的未來,但在Vision Pro未發(fā)布前,大家都不相信。在蘋果看來,眼手口多模態(tài)自然交互,是繼鍵鼠交互、觸控交互之后的第三次交互范式大變革。眼睛除了用來做簡單的選擇之外,還有很多場景是適合的,比如做信息顯示、自動滾屏、自動縮放、自動隱藏等。有了眼動數(shù)據(jù),可以展開很多想象,交互潛力會變得非常巨大。推薦一篇Meta的論文《基于眼動追蹤的交互具有巨大潛力》
Leveling the Playing Field: A Comparative Reevaluation of Unmodified Eye Tracking as an Input and Interaction Modality for VR,感興趣的可以去看一看。
(5)眼動數(shù)據(jù)分析。眼動數(shù)據(jù)分析,可以挖掘用戶很多的心理信息、生理信息,可以用在廣告分析、用戶體驗(yàn)分析、用戶心理分析等。這可能是XR行業(yè)靠眼球追蹤掙錢最多的功能之一,只是在C端會慢一些,C端用眼動分析不多。七鑫易維之前就做過VR看房的案例,用戶看到的是有顏色的,商家會看到用戶在什么地方看的注意力比較集中,什么地方?jīng)]有關(guān)注到,這對于商家來講可以挖掘的信息非常多。
除此之外,像虛實(shí)對齊被視為未來很快落地的場景,只是目前還沒有。但AR在這方面有很強(qiáng)的需求,AR常用的場景就是虛實(shí)融合,如導(dǎo)航,要在真實(shí)的路面上出現(xiàn)虛擬導(dǎo)航的軌跡,但是每一個(gè)人佩戴眼鏡的姿勢不確定,顯示的位置很可能就產(chǎn)生偏差,基本上很難100%的對齊,這就需要實(shí)時(shí)根據(jù)用戶眼睛的位置進(jìn)行調(diào)整,也就是需要眼球追蹤。其次就是消除VAC,這個(gè)依賴于變焦系統(tǒng)的成熟,現(xiàn)在變焦系統(tǒng)還沒有成熟,所以沒有落地的場景。但隨著變焦系統(tǒng)成熟,消除VAC就自然而然產(chǎn)生需求。
那么,Vision Pro的眼球追蹤和七鑫易維之前推的方案有什么不同呢?基本的路線是一樣唯一的不同是蘋果的堆料夠狠。當(dāng)然,也有代價(jià),就是高功耗、高算力、高成本。我們也有類似的方案,預(yù)計(jì)原型機(jī)今年底或明年初會出來。
大家也會疑惑單眼單攝不能用了嗎?仍然具備高可用性,關(guān)鍵是眼球追蹤可用性不僅僅和本身性能相關(guān),還和交互設(shè)計(jì)強(qiáng)相關(guān)。還有一個(gè)小問題,人眼數(shù)據(jù)是用戶生物特征數(shù)據(jù),所以人們對于用戶隱私安全越來越重視,這是很關(guān)鍵的事情。據(jù)我了解,所有用戶認(rèn)證用到生物信息,都不可以在海外建數(shù)據(jù)庫,這涉及到國家安全的問題。剛才也有嘉賓講過,高科技領(lǐng)域我們要防止卡脖子,七鑫易維,無論是在硬件算法,還是軟件上,全部做到了自主可控,所以不存在卡脖子的問題。
七鑫易維成立于2009年,歷經(jīng)14年發(fā)展,在國內(nèi)的眼球追蹤市場已經(jīng)遙遙領(lǐng)先,目前在全球申請的專利數(shù)量將近600項(xiàng),其中發(fā)明專利占到了2/3。
如上圖所示,這是七鑫易維已經(jīng)發(fā)布的一些產(chǎn)品,大家感興趣可以細(xì)聊。接下來,還會陸續(xù)有一些新的型號發(fā)布。
最后,總結(jié)一下:(1)注視點(diǎn)渲染、動態(tài)超分和反畸變、瞳距調(diào)節(jié)將成為XR的基本功能;(2)表情追蹤作為社交強(qiáng)需求,將成為XR的基本功能;(3)虹膜識別將成為XR身份識別和認(rèn)證的最常用方式;(4)眼手口多模態(tài)自然交互將成為XR的交互趨勢;(5)眼球追蹤在XR上已經(jīng)成熟,具備高可用性;(6)眼球追蹤將成為XR的標(biāo)配,如果大家想要加眼球追蹤,找七鑫易維,謝謝!
標(biāo)簽: 暫無
上一篇: FBEC2023 | 莫界科技 創(chuàng)始合伙人李竹:量產(chǎn)樹脂衍射光波導(dǎo)的前沿探索與應(yīng)用
微信掃一掃-禮包攻略通通到手
微信掃一掃關(guān)注琵琶網(wǎng)公眾號:
1.掃描二維碼或搜索微信號,關(guān)注“琵琶網(wǎng)手游”;
2.回復(fù)“您玩的游戲名稱”,即可查看該游戲的最新禮包和資訊;
還沒關(guān)注的小伙伴,趕緊掃一掃吧~
相關(guān)閱讀
新射雕群俠傳之鐵血丹心 874344人下載 進(jìn)入專區(qū)
明日之后 1167845人下載 進(jìn)入專區(qū)
王者榮耀 2412874人下載 進(jìn)入專區(qū)
航海王:燃燒意志 1032579人下載 進(jìn)入專區(qū)
第五人格 2708847人下載 進(jìn)入專區(qū)
率土之濱 1853540人下載 進(jìn)入專區(qū)
陰陽師手游 3254795人下載 進(jìn)入專區(qū)
大話西游手游 1340603人下載 進(jìn)入專區(qū)
倩女幽魂手游 1805712人下載 進(jìn)入專區(qū)
最新活動
最新入庫
《異環(huán)》「收容測試」招募開啟!現(xiàn)在,該你登場啦!
誅仙新版本體驗(yàn)服今日開啟!任賢齊與你相約河陽!
《劍網(wǎng)一端游》經(jīng)典版資料片“俠影藍(lán)途”5月16日發(fā)布,新服“木無言”同日熱開! 不惑之星 《幻塔》擬態(tài)“艾斯特”角色介紹 劍俠情未了!《劍俠情緣·零》幫會兄弟情PV曝光 《傳奇新百區(qū)-盟重神兵》三區(qū)首服“天地”5月16日火熱開啟! 新荷映清光,池畔綠蔭涼?!秳b世界3》初夏新品上線! 新神火霸主?魔域口袋版混沌神域競速賽!
絲海尋古,域韻今風(fēng)! 跟隨《魔域口袋版》感受泉州文化魅力 《魔域口袋版》熱血狂歡活動開獎(jiǎng)倒計(jì)時(shí)! 畢業(yè)頂配裝備免費(fèi)送?!《魔域口袋版》每天送魔石、裝備大獎(jiǎng)! 來《魔域口袋版》輕松種樹拿獎(jiǎng) 神陵武裝覺醒怎么過 覺醒任務(wù)攻略 消除者聯(lián)盟第83關(guān)怎么過 第83關(guān)通關(guān)攻略
《劍網(wǎng)一端游》經(jīng)典版資料片“俠影藍(lán)途”5月16日發(fā)布,新服“木無言”同日熱開!
不惑之星 《幻塔》擬態(tài)“艾斯特”角色介紹
《傳奇新百區(qū)-盟重神兵》三區(qū)首服“天地”5月16日火熱開啟! 劍俠情未了!《劍俠情緣·零》幫會兄弟情PV曝光 拍的就是玩家!魔域口袋版520告白預(yù)告 金碟狂歡!《最終幻想14》金碟慶典來啦! 《洛克人:時(shí)空裂隙》今日上線 ——怪獵聯(lián)動等公測超多福利情報(bào)匯總! 《英雄之城3》深度解讀:百變戰(zhàn)術(shù)×自由配陣,SLG正式進(jìn)入“玩家戰(zhàn)術(shù)決定勝負(fù)”時(shí)代
說唱精靈跨界執(zhí)掌幻獸樂章!《云海之下》官宣小精靈擔(dān)任音樂總監(jiān) ——5.20公測倒計(jì)時(shí):當(dāng)治愈系游戲遇見Z世代音樂鬼才新神火霸主?魔域口袋版混沌神域競速賽! 新荷映清光,池畔綠蔭涼。《劍俠世界3》初夏新品上線! 暢快PK就是這個(gè)味!《完美世界:諸神之戰(zhàn)》決勝季5月22日開啟 《異環(huán)》「收容測試」招募開啟!現(xiàn)在,該你登場啦! 新職業(yè)「魯米內(nèi)斯」登場 《永恒之塔》懷舊服新服預(yù)約火爆開啟 誅仙端游全新隱身召喚流刺客——萬毒現(xiàn)世!
崩壞星穹鐵道流螢玄學(xué)抽卡地點(diǎn) 流螢玄學(xué)抽卡方法介紹 崩壞星穹鐵道云璃技能爆料 云璃技能介紹 崩壞星穹鐵道流螢配隊(duì)推薦 流螢最強(qiáng)配隊(duì) 原神艾梅莉埃技能爆料 艾梅莉埃技能一覽 斗破蒼穹巔峰對決兌換碼大全 公測最新禮包碼 崩壞星穹鐵道流螢突破材料 最新材料需求
原神克洛琳德突破材料匯總 內(nèi)含技能升級材料原神克洛琳德圣遺物推薦 圣遺物搭配攻略 超進(jìn)化物語2最強(qiáng)陣容2024 氪金推薦 眾神派對文月怎么樣 輝夜姬之力技能 眾神派對一輝技能介紹 月讀之力值得抽嗎 王者榮耀新賽季幾月幾號更新 S35賽季開始時(shí)間 崩壞星穹鐵道最強(qiáng)角色有哪些 星魂提升最大角色有哪些
《叫我大掌柜》評測:原來你是這樣的掌柜 《榮耀新三國》評測:高評測3D戰(zhàn)場SLG手游,更適合年輕人三國游戲! 《余燼風(fēng)暴》評測:經(jīng)典魔幻MMORPG 身臨魔幻之境 《艾爾多戰(zhàn)記》評測:克蘇魯風(fēng)放置手游, 畫風(fēng)魔性,玩法有趣! 《有殺氣童話2》評測:格斗童話世界 顛覆傳統(tǒng)MMO童話劇情! 《少俠江湖志》評測:江湖放置 暴走青春
《斗羅大陸:魂師對決》評測:正版3D斗羅手游,熱血魂師對決《圣斗士星矢正義傳說》評測:經(jīng)典動漫IP,放置玩法更休閑娛樂,適合白嫖玩家! 《刀劍神域黑衣劍士:王牌》評測:新一代的rpg手游 玩的就是情懷 《鬼泣·巔峰之戰(zhàn)》手游測評:第二款戰(zhàn)雙,只適合短期玩容易膩 《機(jī)動戰(zhàn)姬聚變》評測:延續(xù)前作IP,回合制戰(zhàn)斗略顯老套! 《胡萊三國3》評測:胡萊十載再續(xù)榮光,真沙盤模擬戰(zhàn)斗! 《我是大東家》評測:模擬古代經(jīng)營,重現(xiàn)洛陽盛景!
斗羅大陸武魂覺醒火系最強(qiáng)陣容 火系最強(qiáng)魂師排行
王者榮耀孫悟空孫行者皮膚特效 孫悟空86西游記皮膚視頻
王者榮耀2021世冠總決賽視頻 重慶QG 4:2佛山GK第六次捧杯 王者榮耀諸葛亮?xí)r雨天司特效 諸葛亮牛年限定皮膚值得買嗎? 王者榮耀鎧絳天戰(zhàn)甲特效視頻 鎧傳說皮膚特效 王者榮耀羋月白晶晶視頻 羋月白晶晶技能特效 2020王者榮耀冬季冠軍杯總決賽南京Hero久競 4:1 DYG 南京Hero成為四冠王 2020王者榮耀冬季冠軍杯1月17日南京Hero久競 4:2 成都AG超玩會 南京Hero晉級總決賽
2020王者榮耀冬季冠軍1月16日 DYG 4:1MTG DYG晉級冬冠總決賽2020王者榮耀冬季冠軍杯1月14日成都AG超玩會 4:1 廣州TTG 成都AG晉級半決賽 2020王者榮耀冬季冠軍杯1月13日 DYG 4:1 杭州LGD大鵝 DYG晉級半決賽 2020冬季冠軍杯1月13日南京Hero久競 4:2 RNGM 南京Hero久競晉級半決賽 王者榮耀v8皮膚高清圖片 虞姬v8皮膚特效視頻 王者榮耀魯班七號電玩小子優(yōu)化視頻 新版電玩小子特效 王者榮耀元歌新皮膚視頻 s22戰(zhàn)令元歌云間偶戲特效展示
熱門游戲
最新資訊
熱門專區(qū)
更多+最新標(biāo)簽
更多+玩家問答
更多+快捷導(dǎo)航
關(guān)于我們| 加入我們| 聯(lián)系我們| 經(jīng)典案例| 免責(zé)聲明| 軟文投稿| 網(wǎng)站地圖| 標(biāo)簽聚合頁
Copyright © 1996-2022 琵琶網(wǎng) All Rights Reserved 廈門市舜邦網(wǎng)絡(luò)科技有限公司
閩網(wǎng)文【2016】4017-067號 閩ICP備12000443號-2 ICP許可證:閩B2-20140076
用戶評論
(已有0條評論)表情