Критерии оценки когнитивных систем

В первой главе книги «Как построить мозг» Крис Элиасмит быстро устанавливает некоторые критерии, которые он будет использовать для оценки Спауна, когнитивной системы, описанной в книге. Он подробно описывает их в главе 8, но ниже я попытаюсь их обобщить.


1. Репрезентативная структура

Систематичность

Система должна связывать понятия взаимосвязанным образом и понимать, что существуют классы понятий, поскольку человеческое мышление систематично. Например, учитывая blue ballи red square, система должна иметь возможность рассуждать о понятии blue square.

Композиционность

Понятия должны создаваться из комбинации понятий в той степени, в какой это поддерживается реальными когнитивными системами. Например, учитывая понятия petи fish, должно быть возможно рассуждать о новом понятии pet fish.

Производительность

Система должна быть способна создавать множество представлений, основанных на нескольких базовых представлениях, в той степени, в которой это поддерживается реальными когнитивными системами.

Проблема массивного связывания

Система должна идентифицировать хорошо масштабируемую операцию привязки.

2. Вопросы производительности

Синтаксическое обобщение

Способность использовать структуру языка независимо от содержания.

Надежность

Потеря нескольких нейронов или воздействие шума не должны сломать систему.

Адаптивность

Вы должны иметь возможность использовать одну систему для нескольких задач.

Память

Система должна уметь показывать отношение к различным видам памяти (рабочей, долговременной).

Масштабируемость

Большие участки мозга должны быть смоделированы и способны выполнять широкий спектр задач.

3. Научная заслуга

Триангуляция

Свяжитесь с максимально возможным количеством источников экспериментальных данных.

Компактность

Хорошие теории можно изложить компактно и без специальных дополнений.


В этой главе он объясняет, что на самом деле это синтез различных других критериев, предложенных разными авторами. Хотя научные достоинства кажутся мне довольно простыми и подробно разрабатывались, в отношении других критериев я менее уверен с точки зрения полноты и приемлемости. Предпринимались ли ранее попытки унификации критериев? Есть ли более полные критерии? Противоречат ли эти критерии каким-либо другим представлениям о том, что должна воплощать в себе когнитивная система?

Ответы (2)

Хофштадтер предоставляет подробный набор критериев в « Подвижных концепциях и творческих аналогиях». Некоторые из его критериев, которые я не вижу упомянутыми выше, касаются потока обработки информации : проходит ли оцениваемая модель через пространство возможностей психологически правдоподобным образом и как это измерить.

Например... Предположим следующее: "Ручка и мяч стоят 110 долларов США. Бита стоит на 100 долларов США больше, чем мяч. Сколько стоит мяч?"

Когнитивная психология показала, что люди готовы сказать: «Мяч стоит 10 долларов». Что неправильно! Хорошая когнитивная модель также должна «думать» на 10 долларов США, прежде чем рассматривать 5 долларов США. В противном случае он не учитывает поток обработки информации.

Он также метафорически упоминает идею включения в модель «повреждений», так что, если какой-либо компонент модели «поврежден», ожидаемый результат от этого компонента должен резко измениться.

Однако информационный поток - интересное дополнение (не читая вашу ссылку или ОП). Интересно, чем он отличается от композиционности и систематичности. Повреждения кажутся покрытыми прочностью.
Я согласен с Ником, не могли бы вы уточнить и включить пример потока обработки информации . А именно, что будет делать хорошая система и что будет делать плохая система.
Конечно. Предположим следующее: «Ручка и мяч стоят 110 долларов США. Бита стоит на 100 долларов США больше, чем мяч. Сколько стоит мяч?» Когнитивная психология показала, что люди готовы сказать: «Мяч стоит 10 долларов». Что неправильно. Хорошая когнитивная модель также должна «думать» на 10 долларов США, прежде чем рассматривать 5 долларов США. В противном случае он не учитывает поток обработки информации.
Кажется, это подпадает под «триангуляцию»? Я думаю, что я неправильно понимаю здесь. Не могли бы вы описать, чем они отличаются?
Возможно, но триангуляция кажется мне слишком широкой. Он не включает пути обработки информации в явном виде, что меня очень волнует. Так что, хотя я бы поместил поток обработки информации в отдельный заголовок, я вижу, как его можно было бы просто внедрить в триангуляцию.

Некоторые вещи опущены

  1. Хотя критерии касаются изучения новых задач в адаптивности, они не касаются возможности легкого переключения между задачами.

  2. Хотя триангуляция касается сопоставления данных, она не обсуждает привязку данных к реальному миру по сравнению с данными, полученными из набора данных. Другими словами, это не касается качества сопоставленных данных.

  3. Компактность не относится к тому, насколько легко что-либо объяснить или понять. На самом деле это может быть мудро, поскольку понимание сильно зависит от инструментов, доступных человеку, цепляющемуся за понимание.

Есть ли более полный критерий?

Приведенный выше критерий обеспечивает общее представление о целях, к которым должна стремиться любая когнитивная система, однако это не касается того, как система должна преследовать эту цель.

Для более полной оценки методов и инструментов, которые следует использовать, см. диссертацию Терри Стюарта на докторскую степень «Методология вычислительного когнитивного моделирования » , в которой описывается набор статистических методов и инструментов , которые могут использовать ученые-когнитивисты (даже без значительного статистического опыта).