гибкости человеческой памяти, где ассоциации, намеки и контекст играют ключевую роль в процессе вспоминания. Как же устроены такие системы? «Ракеты» и «Акулы» В августе 1981 г. на конференции по когнитивным наукам в Беркли Джей Макклелланд представил модель нейронной сети как системы памяти. Более 30 лет спустя Гаурав Сури, тогда еще аспирант, прочитал статью Джея и понял: нейронные сети – это лучший способ понять природу разума. Джей начал с создания набора данных по мотивам мюзикла «Вестсайдская история», где разворачивается противостояние двух банд – «Ракеты» и «Акулы». В наборе данных для каждого персонажа указывались: имя, принадлежность к банде («Ракеты» или «Акулы»), возраст, образование, семейное положение и – просто для развлечения – вымышленная криминальная профессия. Данные представлены на рисунке 4.2. Джей ставил перед собой две задачи: создать нейронную сеть, хранящую эту информацию в своих связях, и исследовать, кáк такая сеть может извлекать информацию, делать спонтанные выводы и обобщения. Какими свойствами должна обладать нейронная сеть, моделирующая человеческую память? Во-первых, она должна извлекать информацию по разным типам запросов. Например, по запросу «Арт» сеть должна выдать факты об Арте: он член банды «Ракеты», ему за 40, у него неполное среднее образование, он холост и промышляет наркоторговлей. Примерно так же Гаурав думает о Сону и вспоминает его характеристики. И наоборот, по запросу «член "Акул" 20 с небольшим лет» система должна найти Кена – единственного, кто подходит под описание. Это напоминает ситуацию, когда Гаураву описывают свойства Сону и он сразу вспоминает своего пса. Рисунок 4.2. Информация, которую Джей заложил в связи между элементами нейросетевой модели для изучения процессов извлечения, вывода и обобщения в памяти Кроме того, нейронная сеть должна уметь восполнять пробелы – угадывать свойства, которым ее не обучали. Например, если мы не укажем профессию Ланса, сеть должна предположить, что он, скорее всего, взломщик: ведь другие персонажи с похожими характеристиками (например, Джон) занимаются именно взломом. Это похоже на наше предположение о том, что собака с высоким отрывистым лаем в квартире – скорее всего, небольшого размера. Нейронная сеть также должна уметь обобщать конкретную информацию и отвечать на вопросы о типичных представителях «Ракет» или «Акул». Например, сеть должна «знать», что большинству «Ракет» 20 с чем-то лет и они чаще всего холосты, – даже если этого ей никто не сообщал напрямую.