光信号从视神经传至丘脑，最终到达枕叶。枕叶位于大脑的最后端，就是在这里，重建了我们所看到的三维世界。能首先“触摸”外部世界的是——视网膜。它有一个网膜投射图，细胞在其中紧紧地排列在一起。这不仅仅是一幅图，细胞的功能各自被分封，有的负责捕捉物体的移动，有的负责探测物体的深度，有的负责观察物体的形态，还有的则摄取颜色。
从眼睛摄取的信号需要进行一些非常聪明的处理加工，这样才能让大脑弄懂哪些是真正想看到的，哪些只是“打酱油的”？打个比方，一个狩猎的人停下车来观察一群狮子。他的眼睛先捕捉那些从狮子和周围草丛反射过来的光，然后视网膜被激发，形成了二维的图像模式，再传导至初级视觉皮层。在颞叶的帮助下，大脑开始构建三维图像，从而区分、辨认这个狩猎场景中的不同细节。视觉信号随时间而发生改变，画面里任何一个细节的移动都能被探测出，不论是速度还是方向。这些被处理的数据也是以同样的速度进行工作，而我们自己却浑然不知。
通过对患有视觉失认症的病人进行研究，逐步收集了一些线索，来搞明白大脑是如何处理视觉景象的。我们发现问题发生在大脑而非眼睛。有一个很经典的例子：丈夫把妻子错认成“帽子”。神经病学家Oliver Sacks在他的同名专著中是这样描述这个病例的：“P博士是一个非常优秀的钢琴家和音乐老师，但同时也是一个病人。他无法识别自己眼睛所看到的物体。有一次，P博士试图将妻子放在自己头上，因为他把妻子错认为是帽子。”
P博士仅仅是其中之一。还有的视觉失认症病人无法正确的感知物体的深度、他人的言语或面容。此外，这种失认症还能影响其他感觉，比如无法辨识气味或声音。
