кортикальная область формирует постоянное представление, или память для последовательности. Изучение последовательностей это наиболее базовый ингредиент для инвариантного представления объектов реального мира.
Объекты реального мира могут быть конкретными, вроде ящерицы, лица или двери, или они могут быть абстрактными, как слово или теория. Мозг обрабатывает абстрактные и конкретные объекты одинаковым образом. И те и другие просто последовательности паттернов, возникающих вместе во времени предсказуемым образом. Фактически, определенные входные паттерны повторяются, что позволяет кортикальной области знать, что эти образы вызваны реальными объектами мира.
Предсказуемость это определение реальности. Если область кортекса обнаруживает, что она может надежно и предсказуемо двигаться по этим паттернам, используя серии физических движений (таких как саккады глаз или скольжение пальца) и может аккуратно предсказывать их, когда они развертываются во времени (как звуки, составляющие песню или произнесенные слова), мозг интерпретирует их, как имеющие причинно-следственные отношения. Разногласия в многочисленных входных паттернах, возникающие в одном и том же отношении снова и снова без очевидной причинной связи, исчезающе малы. Предсказуемые последовательности паттернов должны быть частью большего реально существующего объекта. Таким образом, надежная предсказуемость является надежным способом узнать, что различные события мира физически связаны вместе. У каждого лица есть глаза, уши, рот и нос. Если мозг видит глаза, затем делает саккаду и видит другой глаз, затем еще одну саккаду и видит рот, он определенно чувствует, что видит лицо.
Если бы кортикальные области могли говорить, они могли бы сказать: «Я ощущаю множество различны паттернов. Иногда я могу предсказать, какой паттерн будет следующим. Но эти паттерны определенно соотносятся один с другим. Они всегда возникают вместе, и я могу надежно перепрыгивать между ними. Таким образом, когда я вижу любое из этих событий, я ссылаюсь на них общим названием. Именно это групповое имя, а не индивидуальные паттерны я передаю в высшие области кортекса».
Таким образом, можно было бы сказать, что мозг хранит последовательности последовательностей. Каждая область кортекса изучает последовательности, вырабатывает то, что я назвал «именами» для последовательностей, которые она знает, и передает эти имена в следующие области выше по кортикальной иерархии.
Когда информация движется вверх от первичных сенсорных областей к высшим уровням, мы видим, что они все меньше и меньше изменяются во времени. В первичной визуальной области, типа V1, множество активных клеток быстро изменяется, поскольку новые паттерны падают на сетчатку несколько раз в секунду. В визуальной области IT клетки, возбуждающиеся на паттерны, более стабильны. Что там происходит? Каждая область кортекса имеет репертуар последовательностей, которые ей известны, аналогичные репертуару песен. Области хранят эти песнеподобные последовательности обо всем: звук прибоя, разбивающегося о пляж, лицо вашей матери, путь от дома до ближайшего магазина, как произносить слово «попкорн», как тасовать колоду карт.
У нас есть названия для песен, и подобным образом каждая кортикальная область имеет названия для каждой из последовательностей, которые она знает. Это «имя» — группа клеток, совместное возбуждение которых представляет набор объектов в последовательности. (Не задумывайтесь сейчас о том, как выбираются эти группы клеток; мы придем к этому позже). Эти клетки остаются активными, пока идет последовательность, и именно ее «имя» передается в следующую область по иерархии. Пока поступающие паттерны являются частью предсказуемой последовательности, область выдает постоянно «имя» для следующей области выше по иерархии.
Это как если бы области сказали: «Вот имя последовательности, которую я слышу, вижу или ощущаю. Вам не нужно знать о конкретных нотах, краях или текстурах. Я вам дам знать, если произойдет что-то новое или непредсказуемое». Более конкретно мы можем вообразить область IT на верхушке визуальной иерархии, передающую эстафету ассоциативным областям выше нее: «Я вижу лицо. Да, с каждой саккадой глаза фиксируются на различных частях лица; я вижу различные части лица там, где они должны быть. Но это все еще то же самое лицо. Я дам вам знать, когда увижу что-то другое». Подобным образом предсказуемые последовательности событий становятся идентифицированными «именем» — постоянным паттерном возбужденных клеток. Это происходит снова и снова по мере продвижения по иерархической пирамиде. Одна область могла бы распознать последовательность звуков, которые составляют фонемы, и передает паттерны, представляющие фонемы, вышестоящей области. Вышестоящая область распознает последовательность фонем, чтоб составлять слова. Следующая вышестоящая область распознает последовательности слов, чтоб составить фразы, и т. д. Примите во внимание, что «последовательности» в нижних областях кортекса могут быть очень простыми, такими как визуальное пространственное движение края чего-либо.
Свертыванием предсказуемой последовательности в «именованный объект» в каждой кортикальной области по иерархии мы достигаем все большей и большей стабильности, чем выше мы находимся. Это создает инвариантное представление.
Обратный эффект возникает, когда паттерн движется обратно вниз по иерархии: стабильный паттерн «раскрывается» в последовательность. Предположим, когда вы учились в седьмом классе, вы заучивали Геттисбергское послание, и сейчас вы хотите повторить его. В высших речевых областях кортекса хранится паттерн, представляющий известную речь Линкольна. Во-первых, этот паттерн разворачивается в воспоминание о последовательности фраз и предложений. В следующей области ниже по иерархии каждая фраза разворачивается в воспоминание о последовательности слов. В этом месте разворачивающийся паттерн раздваивается и идет вниз и по слуховой части кортекса, и по моторной. Следуя по моторному пути, каждое слово разворачивается в воспоминание о последовательности фонем. И, наконец, в нижней области каждая фонема развертывается в последовательность мышечных команд для произнесения звуков. Чем ниже по иерархии вы смотрите, тем быстрее сменяются паттерны. Единый, неизменный паттерн на вершине моторной иерархии в конечном счете приводит к сложной и длинной последовательности звуков речи.
Инвариантность также работает в нашу пользу, когда информация идет вниз по иерархии. Если вы хотите напечатать Геттисбергское послание вместо того, чтоб произнести, все начинается с того же самого паттерна на вершине иерархии. В следующей области ниже по иерархии паттерн разворачивается в фразы. Еще ниже фразы разворачиваются в слова. До сих пор нет разницы между тем, произносится Геттисбергское послание или печатается. Но в следующей области ниже по иерархии моторный кортекс выбирает другой путь. Слова разворачиваются в буквы, буквы разворачиваются в мышечные команды для того, чтоб ваши пальцы печатали. 'Four score and seven years ago our fathers brought forth…' — воспоминание об этих словах обрабатывается как инвариантное представление; не имеет значения, произносите ли вы, печатаете или пишете их от руки. Заметьте, вам не нужно запоминать речь дважды, один раз для произнесения, один — для написания. Единое воспоминание об этой речи может принимать различные формы поведения. В любой области инвариантный паттерн может разветвиться и следовать различными путями.
Как дополнительная эффективность, представление о простых объектах на нижних уровнях иерархии может быть многократно использовано для различных высокоуровневых последовательностей. К примеру, нет необходимости изучать одну последовательность слов для Геттисбергского послания и совершенно другую — для речи 'I Have a Dream' Мартина Лютера Кинга, даже если только некоторые слова в двух высказываниях совпадают. Иерархия вложенных последовательностей позволяет разделять и многократно использовать низкоуровневые объекты — слова, фонемы и буквы — всего лишь отдельные примеры. Это замечательный эффективный способ хранить информацию о мире и его структуре, и он сильно отличается от того, как работает компьютер.
Та же самая развертываемая последовательность возникает как в сенсорных, так и в моторных областях. Этот процесс позволяет воспринимать и понимать объекты с различных точек зрения. Если вы идете к холодильнику, чтоб взять мороженого, ваш визуальный кортекс активен на множестве уровней. На высшем уровне вы постоянно воспринимаете «холодильник». В областях ниже эти визуальные ожидания разбиваются на серию более локализованных визуальных паттернов. Взгляд на холодильник состоит из фиксаций на дверной ручке, на дозаторе мороженого, на магнитах двери, на детских рисунках и так далее. За несколько миллисекунд, когда вы производите саккаду с одной черты холодильника на другую, предсказание о результате каждой саккады идет вниз по визуальной иерархии. Пока эти предсказания подтверждаются от саккады к саккаде, ваши высшие визуальные области остаются удовлетворенными тем, что вы фактически смотрите на холодильник. Заметьте, что в этом случае, в отличие от фиксированного порядка слов в Геттисбергском послании, последовательность, которую вы видите, когда смотрите на холодильник, не фиксирована; поток информации и паттерны воспоминаний зависят от ваших действий. Таким образом, в случае, подобном этому, развертывание паттерна не является жесткой последовательностью, но результат тот же самый; медленно меняющийся, высокоуровневый паттерн развертывается в более быстро меняющиеся, низкоуровневые паттерны.
Способ, которым вы запоминаете последовательности и представляете их именами, когда информация течет вверх и вниз по кортикальной иерархии, может напомнить вам иерархию военных команд. Генералы на армейской верхушке говорят: «Выдвинуть войска во Флориду на зиму». Простая высокоуровневая команда разворачивается в более детальные последовательности команд, когда она просачивается вниз по уровням иерархии. Нижестоящее командование понимает, что команда требует последовательности таких шагов, как подготовка к покиданию старой позиции, транспортировки во Флориду и подготовки к прибытию на новое место. Каждый из этих шагов разбивается на еще более подробные, чтоб быть выполненными подчиненными. Внизу иерархии тысячи отдельных структур выполняют десятки тысяч действий, приводящих в результате к перемещению войск. Отчеты о том, что происходит, генерируются на каждом уровне. Когда они просачиваются вверх по иерархии, они снова и снова суммируются, до тех пор, пока генерал на верхнем уровне иерархи не получит краткий отчет: «Перемещение во Флориду произошло успешно». Генерал не вникает в детали.
Из этого правила есть исключение. Если что-то идет не так и не может быть выполнено на подчиненных уровнях по цепочке команд, то отчет идет вверх по иерархии до тех пор, пока кто-то не будет знать, что делать далее. Офицер, который знает, как разрешить ситуацию, не видит исключения. Что было непредвиденной проблемой для подчиненных, всего лишь следующая задача в его списке. Офицер затем дает новую команду подчиненным. Неокортекс ведет себя подобным образом. Как мы увидим вскоре, когда возникающие события (другими словами — паттерны) не ожидаемы, информация о них поступает наверх по кортикальной иерархии до тех пор, пока какая-нибудь область не сможет обработать ее. Если нижние области кортекса не смогут предсказать, какой паттерн они видят, они рассматривают это как ошибку и передают ошибку вверх по иерархии. Это повторяется до тех пор, пока какая-то область не предскажет паттерн.
В силу своей конструкции, каждая кортикальная область пытается хранить и вспоминать последовательности. Но это все еще простое описание мозга. Необходимо добавить немного усложнения в эту модель.
Информация, идущая снизу вверх к областям кортекса — это входные паттерны, распределенные по тысячам и миллионам аксонов. Эти аксоны приходят из различных областей и содержат все виды паттернов. Количество паттернов, которое возможно даже на тысяче аксонов, больше, чем количество молекул во вселенной. За время жизни область кортекса видят только крошечную долю этих возможных паттернов.
Здесь возникает вопрос: Когда отдельная область хранит последовательность, то последовательность чего именно она хранит? Ответ в том, что область сначала классифицирует информацию, как одну из ограниченного количества возможностей, и только потом ищет последовательность. Вообразите, что вы — отдельная кортикальная область. Ваша задача — сортировать кусочки цветной бумаги. Вам предоставили десять корзин, каждая из которых помечена образцом цвета. Одна корзина для зеленых, другая для желтых, третья для красных и так далее. Вам дают кусочки цветной бумаги, один за другим, и велят сортировать их по цветам. Каждая полученная вами бумажка слегка отличается. Поскольку в мире бесконечное количество цветов, вы никогда не получите двух бумажек в точности одного и того же цвета. Иногда легко сказать, в какую корзину должна быть помещена цветная бумажка, но иногда это сложно. Бумажка, которая наполовину красная, а наполовину оранжевая, может быть помещена в любую корзину, но вы должны поместить только в одну из низ, либо в красную, либо в оранжевую, даже если придется выбирать произвольно. (Цель данного упражнения — показать, что мозг должен классифицировать паттерны. Области кортекса делают это, но нет ничего подобного корзинам, в которые клались бы паттерны.)
Теперь вам дали дополнительное задание найти последовательность. Вы замечаете, что часто возникает последовательность «красный красный зеленый пурпурный оранжевый зеленый». Вы называете это «ККЗПОЗ» — последовательностью. Заметьте, что ни одну последовательность невозможно распознать, если вы не классифицируете каждый кусочек бумаги. Без предварительной классификации каждого кусочка бумаги к одной из десяти категорий вы не сможете сказать, что две последовательности являются одинаковыми.
И так, вы поняли задачу и выполняете ее. Вы собираетесь просматривать все входные паттерны — кусочки цветной бумаги, поступающие из низших кортикальных областей — классифицировать их и искать последовательности. Оба шага, классификация и формирование последовательности необходимы для создания инвариантного представления, и каждая область кортекса делает это.
Процесс формирования последовательности окупается, когда информация неоднозначна, как в случае с кусочком бумаги, который попадает иногда между красным и оранжевым. Вы должны выбрать корзину для бумажки, даже если вы не уверены, более красная она или более оранжевая. Если вы знаете наиболее подходящую последовательность для этой серии
