Уильям Баум: Подкрепление как взаимосвязь стимулов и поведения

Закон индукции гласит, что поведение организма состоит из индуцируемых безусловными стимулами активностей. Закон распределения описывает отбор — индуцируемые активности конкурируют за ограниченное время. Закон ковариации (взаимосвязи событий) резюмирует павловское и оперантное обусловливание как процесс изменения функции стимулов — какие события индуцируют какую активность.

Исследования задержки показывают, что «подкрепление» происходит даже если оно заметно отсрочено от подкрепляемого поведения (Baum, 1973; Lattal & Gleeson, 1990). Аналогичные результаты известны в исследованиях павловского обусловливания и наблюдений за дополнительной активностью на режимах подкрепления разной степени разреженности (Rescorla, 1968; Staddon & Simmelhag, 1971). Чем реже происходит подкрепление, тем больше разнообразных необязательных действий совершается, но это происходит с определенной закономерностью, то есть подкрепление продолжает контролировать поведение в целом даже если оно происходит совсем не рядом с целевым поведением.

В 1967 году Роберт Рескорла опубликовал критическую демонстрацию, что ключевым процессом в обусловливании является взаимосвязь событий, а не их временная близость. В его эксперименте среди двух групп крыс электрошоки и звонки появлялись во временной близости одинаково, но различалась их растянутая во времени взаимосвязь — в группе A сначала происходил звонок и за ним электрошок, а в группе B электрошок происходил одинаково в присутствие и отсутствие звонков. Временная близость предполагает, что «условная реакция» появится в двух группах, но растянутая во времени взаимосвязь событий есть только в группе A — по результатам эксперимента только у крыс в группе A появилась «условная реакция страха».

Дальнейшие эксперименты подтвердили тезис о «предсказуемой связи условного и безусловного стимулов» на растянутом временном промежутке в терминах конкуренции. В статье 1968-го года Рескорла и Вагнер показали, что в классическом обусловливании важным дополнением к временной близости является конкуренция стимулы конкурируют за «ассоциативную силу», поскольку у неё есть предел, — за счёт этого их модель обусловливания оценивает «предсказуемость».

Изменение ассоциативной связи стимула через подкрепление и неподкрепление зависит от текущей ассоциативной силы — не только этого стимула, но и других конкурентно присутствующих стимулов, — Rescorla & Wagner, 1972, стр. 73.

Основная идея модели Рескорлы-Вагнера — условный стимул набирает «ассоциативную силу» постепенно. Ассоциативная сила описывает связь условного стимула и величины условной реакции: предельная величина набирается на протяжении испытаний — быстрее в начале и медленнее по мере приближения к пределу — а предел определяет безусловная реакция. Например, звонок достигает максимальной ассоциативной силы, когда выделяет столько же слюны у собаки, сколько и один грамм еды. Чем интенсивнее безусловный стимул, тем выше предел.

На изменение ассоциативной силы условного стимула влияют конкурентные условные стимулы для той же условной реакции — предел задает конкуренцию. Звонок связан с одним граммом еды и выделяет предельную величину слюны. Если связать с едой свет лампочки, но не разбить взаимосвязь еды и звонка, то свет будет выделять меньше слюны из-за конкуренции звонка за ассоциативную силу — это называют «блокированием».

Все стимулы, включая те, что кажутся «нейтральными», но на самом деле не нейтральные (Kimble, 1961; Kish, 1966) конкурируют за участие в обусловливании — некоторые из них более интенсивные и заметные, чем другие, поэтому с ними обусловливание происходит быстрее. Колючий ёж — это более заметный условный стимул, чем вкус, в обусловливании страха. Обратное справедливо для обусловливания вкусового отвращения. В некоторых ситуациях «заметность» стимула в конкуренции обусловливании зависит от стимульной истории.

Теория Рескорлы-Вагнера предполагает, что подкрепление для поведения можно определить по взаимосвязанным событиям: Какие события происходят с большей вероятностью вслед за поведением? Какие события, наоборот, никогда не происходят? Устранение взаимосвязи может устранить нежелательное поведение. Например, при фобии вслед за избегающим поведением с меньшей вероятностью случается запустившее страх событие, а устранение этой отрицательной корреляции — экспозиционная терапия, во время которой у клиента устраняют возможность прекратить контакт с вызывающим физиологический ответ стимулом — снижает интенсивность фобии. В сочетании с законами распределения времени и индукции, взаимосвязь событий объясняет многие человеческие активности, включая психотические расстройства.

Текст: Тимур Курицын, Иван Чистяков
Оформление: Вероника Пачина
Оригинал: Baum, W. M. (2018). Three laws of behavior: Allocation, induction, and covariance. Behavior Analysis: Research and Practice, 18(3), 239.