作者covenant (蓝悠)
看板VR
标题[闲聊] VR的眼球追踪
时间Wed Mar 2 10:30:25 2016
http://goo.gl/afKmAQ
看到板友经常提到因为解析度的限制而产生的纱窗效应，又刚好浏览到这篇报导，
里面提到目前为止VR经常需要辅以高性能规格的电脑，但是利用眼球追踪的技术可
以将我们视线集中之处提高解析度，并将视线集中以外之处降低解析度来减低负担
。
实际上也已经有人开始运用在虚拟实境头戴式显示器之上：
http://www.getfove.com/ 官网
https://goo.gl/cavv3J 中文报导
像下面的影片就是让身障者可以透过眼球追踪来操纵钢琴，最後成功完成合唱的
伴奏，让人挺感动的：
https://www.youtube.com/watch?v=--WyN7wJ5bI
爬文好像没看到相关讨论，不晓得板友有怎麽样的想法？
--
「最後には...どうか、幸せな记忆を。」
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 118.166.167.77
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/VR/M.1456885834.A.6FC.html
1F：推 BOJJ: 纱窗是硬体解析度不够 你说的这种提高或降低的解析度是能降 03/02 10:40
2F：→ BOJJ: 低显卡的运算需求 03/02 10:40
3F：→ mrmowmow: 这样只是纱窗开个孔 03/02 10:49
4F：→ mrmowmow: 余光看起来还是纱窗 03/02 10:49
5F：推 ptag720: 更高解析度的萤幕做的出来，但是vive/rift没有搭配也是电 03/02 10:50
6F：→ ptag720: 脑推不动 03/02 10:50
7F：→ ptag720: 都叫余光你哪看的清楚 还纱窗 03/02 10:51
8F：推 ptag720: 要是透过视线追踪来降低硬体需求，那也就能搭更高解析的 03/02 10:53
9F：→ ptag720: 萤幕了 03/02 10:53
10F：推 jyhlih: 眼球追踪这技术如果配合视网膜扫描显示技术应该不错 03/02 10:56
11F：→ a7610783: 跟不上眼球变焦速度会很悲剧 03/02 11:31
12F：→ mrmowmow: 笑死了，纱窗开个孔余光你会看不到纱窗？？别小看余光好 03/02 14:18
13F：→ mrmowmow: 吗 03/02 14:18
14F：推 Porops: 楼上知道眼睛是怎麽对焦的吗....人眼本来就无法同时看清 03/02 14:27
15F：→ Porops: 处整个眼界的画面 03/02 14:28
16F：推 ptag720: 中央凹（fovea centralis），是视网膜中视觉（辨色力、 03/02 15:20
17F：→ ptag720: 分辨力）最敏锐的区域 03/02 15:20
18F：→ ptag720: 以人为例，在视神经盘颞侧约3.5mm处，有一黄色小区，称 03/02 15:21
19F：→ ptag720: 黄斑（macula lutea），其中央的凹陷，就是中央凹 03/02 15:21
20F：→ ptag720: 黄斑中央凹陷称中央凹，此处视网膜最薄，只有色素上皮细 03/02 15:21
21F：→ ptag720: 胞和视锥细胞两层细胞，双极细胞和节细胞均斜向周围排列 03/02 15:22
22F：→ ptag720: 此处视锥细胞与双极细胞均一对一联系，故视觉最为敏锐而 03/02 15:22
23F：→ ptag720: 精确，称中心视觉。 03/02 15:22
24F：推 KD0084: 视觉系是你(X 03/02 15:52
25F：推 a7610783: 但是大陆有一款号称追踪眼球的，一整个就是悲剧 03/02 16:45
26F：推 HTCSense: 啪啪啪 好响亮的打脸声 03/02 16:49
27F：推 Kamikiri: 又是你.....整天闲闲没事在那边乱呛人..... 03/02 16:57
28F：→ mrmowmow: 打什麽脸别搞笑了，眼睛用中央看代表余光看不到？如果余 03/02 17:10
29F：→ mrmowmow: 光看不到那左右边丢过来的飞球早就砸死一堆人，用点脑好 03/02 17:10
30F：→ mrmowmow: 吗？生物构造没那麽简单，日常生活中余光帮了你一堆忙， 03/02 17:10
31F：→ mrmowmow: 你没察觉而已 03/02 17:10
32F：→ mrmowmow: 真是可悲，余光看得到这件事我居然要对成人解释 03/02 17:10
33F：推 ksm: 余光要看到也要投入注意力... 03/02 17:14
34F：推 aria0520: mr别暴怒了 人家只是说余光看不清楚 你自己曲解成看不到 03/02 17:20
35F：推 a7610783: 没当过兵所以不知道什麽叫做眼角余光看齐吧 03/02 17:20
36F：→ aria0520: 别小看余光!(怒) 03/02 17:21
37F：推 ptag720: 喵喵先生爱到处乱呛众所皆知啊 03/02 17:26
38F：→ ptag720: 或是 猫猫先生.. 03/02 17:27
39F：推 Litfal: 不对，就算眼球追踪，还是得整个面板都用高解析度， 03/02 17:32
40F：→ Litfal: 这种状况下，就不会有纱窗效应(假设解析度已经够高) 03/02 17:33
41F：→ Litfal: 这种情况下运算量太大，所以需要优化，去降非视野中心的细 03/02 17:35
42F：→ Litfal: 节是优化一法 03/02 17:35
43F：推 ptag720: 没错 整个面板高解晰度，针对视线中心全解析度运算 03/02 17:36
44F：→ ptag720: 余光只要消除会让猫猫先生崩溃的纱窗就好 03/02 17:37
45F：→ mrmowmow: 算了我就多花时间教你们吧，这文章网页附图的花瓶，有看 03/02 17:43
46F：→ mrmowmow: 到吗？虽然这技术是调整解析度，但是为了让你感受这张图 03/02 17:43
47F：→ mrmowmow: 做了周围散焦的效果，其实这种追踪眼睛的技术之前也有听 03/02 17:43
48F：→ mrmowmow: 过，那时说的效果就是这张图，也就是在视觉外做散焦的效 03/02 17:43
49F：→ mrmowmow: 果，模拟你在日常生活眼睛看的样子，好了你说余光看不清 03/02 17:43
50F：→ mrmowmow: 处？？那为何还要故意做这种余光散焦的效果，余光应该分 03/02 17:43
51F：→ mrmowmow: 不清楚是准焦清晰还是散焦模糊阿？事实上余光就是感觉的 03/02 17:43
52F：→ mrmowmow: 到，所以你说余光感觉不感觉的到纱窗？ 03/02 17:43
53F：推 NoneWolf: Vive有多的USB孔 加一个硬体就能降低显卡需求也是不错 03/02 17:44
54F：→ Justisaac: 人眼余光本来就是散焦.....焦点在视野中心而已 03/02 17:56
55F：嘘 imega: 这边也有崩溃的喔 03/02 17:59
56F：推 Kamikiri: 你都说是模拟日常生活眼睛看的样子了....... 03/02 18:24
57F：→ Kamikiri: 那是不是代表人眼余光本来就散焦看不清楚......... 03/02 18:24
58F：→ Kamikiri: 就是因为本来就看不清楚 所以VR打散焦视觉效果也不影响 03/02 18:25
59F：→ Kamikiri: 你这不是自打脸? 03/02 18:25
60F：推 phasmophobia: 他根本看不懂别人在讲啥吧.. 03/02 19:37
61F：→ cau0424: 眼球追踪只能偷效能，"降低"硬体需求而已 03/02 20:10
62F：→ cau0424: 有可能视线集中的区域面板都得要"真的"做上足够规格 03/02 20:11
63F：→ cau0424: 你用现在2K的面板再怎麽眼球追踪 焦点也不可能变成16K 03/02 20:12
64F：推 onion1990: 楼上 他就是想说用16K面板 搭配散焦技术 达到降低硬体 03/02 22:43
65F：→ onion1990: 负担效果 不过16k面板散焦也不会有纱门效果啊… 03/02 22:43
66F：推 a7610783: 应该说是模糊...但我担心的是追踪跟不上眼球转动速度( 03/02 23:02
67F：→ a7610783: 眼球转动>摄影机感应>传送给电脑位置>显示在萤幕....) 03/02 23:02
68F：→ a7610783: 有一点迟疑人眼都能感觉到lag.... 03/02 23:02
69F：→ mrmowmow: 你们是不是搞错什麽？周围低解析--->减少主机负荷 03/02 23:06
70F：→ mrmowmow: 周围散焦--->增加主机负荷，是故意做的模拟眼睛的效果 03/02 23:07
71F：→ mrmowmow: 其实这台主打的比较是散焦功能，还有眼球控制，至於周围 03/02 23:09
72F：→ mrmowmow: 低解析，还在开发中吧，毕竟软体商还要写软体去配合你这 03/02 23:09
73F：→ mrmowmow: 功能 03/02 23:09
74F：推 Kamikiri: 你才搞错了什麽 原文GameWatch连结就有写到 03/03 08:43
75F：→ Kamikiri: Foveated Rendering=视线中心高解析 其余低解析 03/03 08:44
76F：→ Kamikiri: 这种运算方法可以把VR的硬体需求拉低到中低阶PC 03/03 08:44
77F：→ Kamikiri: 因为只有视线中心是全力跑 余光只跑低解析 03/03 08:45
78F：→ Kamikiri: 如果是高阶GPU 还可以把多余能力拿来提高解析跟FPS 03/03 08:46
79F：→ Kamikiri: 可以把GPU的运算效率提高到理论值的5~10倍 03/03 08:47
80F：→ Kamikiri: 如果散焦会增加主机负荷 这个产品的主旨根本不成立 03/03 08:49
81F：推 mamaya3: 像是Level of detail的延伸 余光区的多边形被简略 03/03 09:20
82F：推 mamaya3: 像本文的方式把四点当一点算 也许效果比LOD还好@@ 03/03 09:24
83F：→ anipeg: 单纯是"解析度"让人误解了吧~~ 纱窗是受限显示硬体解析度 03/03 11:15
84F：→ anipeg: 而文中说的调整解析度是指软体render的画面解析度 03/03 11:16
85F：→ anipeg: 只要显示器的解析度够高，3D render只用VGA也不会有纱窗 03/03 11:17
86F：→ anipeg: 只是看起来很像马赛克，追踪眼球只是用来降低显卡负担而已 03/03 11:18
87F：→ anipeg: 不过眼球焦点追踪在未来VR应有很大的应用，搭配VR CAM不错 03/03 11:20
89F：→ mrmowmow: 在fove强打我的确搞错了，fove主要的确是低解析，甚至连 03/03 12:35
90F：→ mrmowmow: 空间散焦功能都用低解析来简化主机效能 影片第一段是模 03/03 12:35
91F：→ mrmowmow: 拟眼睛散焦 第二段才是你们说的圆周降低解析度 当然他两 03/03 12:35
92F：→ mrmowmow: 者都用降低解析度 (应该有配合模糊化) 第一段跟第二段的 03/03 12:35
93F：→ mrmowmow: 差别我真的懒得解释了 自己去google相机光圈跟景深原理 03/03 12:35
94F：→ mrmowmow: 我重点是说 人的余光感觉得到散焦或清晰(影片效果一) 同 03/03 12:35
95F：→ mrmowmow: 样也感觉得到 纱窗 03/03 12:35
96F：→ mrmowmow: 一般3d游戏做的单眼浅景深散焦效果，就是增加负荷的效果 03/03 12:40
97F：→ mrmowmow: ，游戏内可以选择开关 03/03 12:40
98F：→ kuma660224: 纱窗在目前不是最大问题。问题是绘图运算量 03/03 14:02
99F：→ kuma660224: 头显本身不太耗电，但那个频宽太大所以要接线。 03/03 14:06
100F：→ kuma660224: 理想的VR是运算也在穿戴装置上，真正无线。 03/03 14:06
101F：→ kuma660224: 但5年後顶级手机也追不上目前顶级PC效能 03/03 14:06
102F：→ kuma660224: 怎麽办? 就是眼球追踪来帮忙了。 03/03 14:06
103F：→ kuma660224: 假设即时知道只有某25%面积是看的位置。 03/03 14:08
104F：→ kuma660224: 只要对那一区块做点对点的1:1高解析运算 03/03 14:09
105F：→ kuma660224: 再另外算一低解析的全景。两个做融合。 03/03 14:10
106F：→ kuma660224: 就有机会在较弱的可携硬体跑单眼1080x1200 03/03 14:11
107F：→ kuma660224: 比如说未来手机。 03/03 14:11
108F：→ kuma660224: 画质是变差，但差的是余光的部分，没啥关系 03/03 14:12
109F：→ kuma660224: 但是绘图运算处理的成本体积重量可以大幅下降 03/03 14:13
110F：→ kuma660224: 但偶尔眼睛快速转向有可能会先看到粗糙版。 03/03 14:15
111F：→ kuma660224: 再0.0x秒後才变成精致版。 03/03 14:15
112F：→ kuma660224: 不过很少有机会眼球转向太快，仍然Z>B 03/03 14:16
113F：→ kuma660224: 局部高解析绘图很有未来，但还不是现在可行 03/03 14:19
114F：推 mamaya3: 手机要做眼球追踪有难度啊 要另外塞追踪摄影机进手机吗? 03/03 15:06
115F：→ mamaya3: 不过如果这种LOD效果不差 倒是可以帮无线技术省很多频宽 03/03 15:07
116F：推 Porops: 手机当运算中心 然後由Vive之类穿戴式配备做眼球追踪吧 03/03 15:30
117F：→ kuma660224: 如楼上所说。 03/03 20:58
118F：→ kuma660224: 追踪是VR装置内有东西持续判断你眼球转动方向 03/03 21:01
119F：→ kuma660224: 手机或电脑只是依据视野不同需求做绘图 03/03 21:02
120F：→ kuma660224: 它就救不了纱窗，但是可让运算量快速降低。 03/03 21:03
121F：→ kuma660224: 甚至主机轻量穿戴，不必有那条烦人的线。 03/03 21:04
122F：→ Litfal: 眼球追踪只是一种可能的方向，但不是唯一... 03/04 02:05
123F：→ Litfal: 硬体会进步，软体也会，VR还有太多方向可以优化了 03/04 02:06