Джеф Хокинс - Об интеллекте
Зрение также базируется на потоках информации во времени и работает тем же самым общим образом, как слух или осязание, но поскольку мы способны узнавать индивидуальный объект за одну фиксацию, оно портит общую картину. Несомненно, эта способность распознавать пространственные паттерны за короткое время фиксации многие годы сбивала с пути исследователей, работавших над машинным зрением. Они в основном игнорировали критическое значение времени. Хотя можно в лабораторных условиях заставить человека узнавать объекты без движения глаз, это не является нормой. Нормальное зрение, такое как чтение этой книги, требует постоянного движения глаз.
6.2. Интеграция чувствЧто же насчет ассоциативных областей? До сих пор мы видели, как информационные потоки идут вверх и вниз по конкретной сенсорной области кортекса. Потоки, идущие вниз, замещают поступающую информацию и делают предсказание о том, что мы ощутим далее. Те же самые процессы возникают между различными чувствами — то есть, между зрением, слухом и осязанием. Например, что-то, что я слышу, может привести к предсказанию того, что я должен увидеть или почувствовать. Сейчас я пишу в моей спальне. У нашей кошки Кео есть ошейник, который позвякивает, когда она ходит. Я слышу ее приближающееся позвякивание из коридора. По этой звуковой информации я узнаю мою кошку, поворачиваю голову к коридору и входящей Кео. Я ожидаю увидеть ее на основании ее звука. Если Кео не войдет или появится другое животное, я буду удивлен. В этом примере, звуковая информация сначала привела к слуховому узнаванию Кео. Информация поднялась по слуховой иерархии к ассоциативной области и соединила зрение и слух. Затем образ спустился обратно по слуховой и зрительной иерархии, ведя и к слуховому, и к зрительному предсказанию. Рисунок 4 иллюстрирует это.
Такого рода мультисенсорные предсказания возникают все время. Я сгибаю держатель моей ручки, я чувствую, как держатель соскальзывает с пальцев и я ожидаю услышать щелкающий звук, когда держатель ударится о корпус ручки. Если я не слышу щелчка, следующего за отпусканием держателя, я буду удивлен. Мой мозг точно предсказывает, когда я услышу звук и на что он должен быть похож. Чтоб происходило такое предсказание, информация поднимается через соматосенсорный кортекс и спускается обратно и в соматосенсорный, и в слуховой кортекс, ведя к предсказанию звука и ощущения щелчка.
Другой пример: несколько дней я ездил на работу на велосипеде. В то утро я шел в гараж, брал велосипед и выкатывал его на подъездную дорожку. В процессе этого, я получал множество визуальных, тактильных и слуховых ощущений. Велосипед ударялся о дверной косяк, цепь трещала, педали ударяли по моим ногам, и колеса вращались, когда терлись об пол. В процессе выноса велосипеда из гаража мой мозг встречался с плотиной зрительных, слуховых и тактильных ощущений. Каждый сенсорный поток делает предсказания для других весьма скоординированным образом. То, что я вижу, ведет к точному предсказанию того, что я почувствую и услышу, другие чувства примерно также. Вид велосипеда, ударяющегося об косяк заставляет меня ожидать услышать определенный звук и почувствовать подскакивание велосипеда. Ощущение педалей, ударяющихся о мои ноги, заставляет меня взглянуть вниз и увидеть педали там, где я их почувствовал. Предсказания настолько точны, что я должен сразу заметить, если одно из этих ощущений будет немного не скоординированным или необычным. Информация одновременно течет вверх и вниз по сенсорной иерархии, чтобы создать единый сенсорный опыт, включающий предсказание по всем органам чувств.
Рисунок 4. Информация течет вверх и вниз по сенсорной иерархии, чтобы сформировать предсказания и создать единый сенсорный опыт.
Проведите такой эксперимент. Прекратите читать и сделайте что-нибудь, любое движение, которое включает движение вашего тела и манипулирование объектами. Например, подойдите к раковине и откройте кран. Теперь, когда вы сделали это, попробуйте заметить каждый звук, прикосновение и изменение в визуальной информации. Вы должны сконцентрироваться. Каждое действие глубоко связано со зрением, слухом и тактильными ощущениями. Поднимите или поверните кран, и ваш мозг будет ожидать почувствовать давление на вашу кожу и сопротивление ваших мышц. Вы ожидаете увидеть и почувствовать движение рукоятки крана и услышать звук воды в кране. Когда вода ударится о раковину, вы ожидаете услышать другой звук и увидеть и почувствовать брызги.
Каждый шаг создает звук, который вы предвидите осознанно или нет. Даже простейшее действие — держание книги — ведет к многочисленным сенсорным предсказаниям. Вообразите, что вы почувствовали и услышали закрытую книгу, но визуально она остается открытой. Вы должны быть шокированы и сбиты с толку. Как мы видели в эксперименте с измененной дверью в главе 5, вы постоянно делаете предсказания о мире, которые скоординированы по всем вашим чувствам. Когда я концентрируюсь на всех мелких ощущениях, я поражаюсь, как сильно интегрированы наши сенсорные предсказания. Хотя эти предсказания могут показаться простыми или тривиальными, обратите внимание, какие они всепроникающие и как только они могут происходить с такой координацией паттернов, следующих вверх и вниз по кортикальной иерархии.
Когда вы поймете, как взаимосвязаны чувства, вы придете к выводу, что неокортекс, все сенсорные и ассоциативные области работают как одно целое. Да, у нас есть визуальный кортекс, но он просто один из компонентов одной общей сенсорной системы — изображения, звуки, прикосновения и другие чувства, скомбинированные, текут вверх и вниз по единой иерархии со многими ветвями.
Следующий факт: все предсказания обретаются на опыте. Мы ожидаем в настоящем и в будущем, что держатель авторучки будет издавать щелкающий звук, потому что он так делал в прошлом. Велосипеды, ударяющиеся в гаражах, выглядят, чувствуются и звучат для нас предсказуемым образом. Вы не родились с этими знаниями; вы обрели их благодаря невероятной способности вашего кортекса помнить паттерны. Если для поступающего в ваш мозг паттерна есть соответствующий паттерн, ваш мозг использует его, чтобы предсказать будущие события.
Хотя рисунки 3 и 4 не отображают моторный кортекс, вы можете вообразить его как еще одну стопку блинчиков, также как и сенсорную стопку, подсоединенную к сенсорной системе через ассоциативные области (хотя с более тесными соединениями с соматосенсорным кортексом для выполнения движений тела). В этом смысле моторный кортекс ведет себя почти так же, как и сенсорные области. Информация из любой сенсорной области может подниматься к ассоциативным областям, что может вызвать паттерн, попадающий в моторный кортекс и приводящий к поведению. Точно так же, как визуальная информация может вызвать паттерны, идущие к слуховым и сенсорным областям, она может вызвать и паттерны, идущие к моторному кортексу. В первом случае мы интерпретируем эти потоки вверх-вниз как предсказание. В случае с моторным кортексом — как моторные команды. Как указал Монткастл, моторный кортекс выглядит точно так же, как и сенсорный. Следовательно, как кортекс обрабатывает возвращающиеся сенсорные предсказания, похожим образом обрабатывает и моторные команды.
Вскоре мы увидим, что в кортексе нет чисто моторных или чисто сенсорных областей. Сенсорные паттерны одновременно текут и там и там — и затем возвращаются по всем областям иерархии, ведя к предсказанию или моторному поведению. Хотя у моторного кортекса есть некоторые специальные атрибуты, о нем можно думать всего лишь как о части одной большой системы «память-предсказание». Он практически похож на другие органы чувств. Зрение, слух, осязание и поведение глубоко переплетены.
6.3. Новая точка зрения на v1Следующий шаг в понимании архитектуры кортекса требует взглянуть на кортикальные области по-другому. Мы знаем, что высшие области кортикальной иерархии формируют инвариантное представление. Но почему эта важная функция должна возникать только наверху? Держа на задворках мысли замечание Монткастла о симметрии, я начал изучать различные способы, которыми могли бы соединяться кортикальные области.
Рисунок 1 изображает четыре классических области визуального пути, V1, V2, V4 и IT, где V1 внизу, на нем V2, V4 и на самом верху IT. Каждый из них условно рассматривается и изображен как единая, непрерывная область. Таким образом все клетки V1 предположительно делают одно и то же, хотя в различных частях визуального поля. Все клетки V2 решают задачу подобного типа. Все клетки V4 специализированы подобным же образом.
С традиционной точки зрения, когда изображение лица поступает в область V1, клетки в нем создают грубый набросок лица в терминах простых линейных сегментов и других элементарных деталей. Этот набросок поступает в V2. Затем V2 делает свое дело с изображением, производя более сложный анализ черт лица, и передает результат в V4, и т. д. Инвариантность и распознавание объекта достигается только тогда, когда информация достигает верхней точки, IT.