Стимульный контроль и трёхчленная последовательность

По книге

Урок 2.2 закончился на том, что оперантное обусловливание устанавливает функциональную связь не только между поведением и его последствиями, но и между поведением и его антецедентами. В отличие от модели «если a, то b», к которой принадлежит концепция «стимул — реакция», модель «ab вследствие c» постулирует, что отношение между событием (b) и его контекстом (a) возникает из-за последствий (c).

Применительно к трёхчленной последовательности Скиннера это значит, что взаимоотношение между средой (a) и поведением (b) существует из-за последствий предыдущего сочетания (ab) поведения и среды. Подкрепление оказывает усиливающее действие не на само поведение, а на связь между конкретной обстановкой и поведением (Moxley, 2004, с. 111).

В результате подкрепления отбираются не только определённые формы поведения, но и условия среды, которые в будущем станут вызывать данный класс реакций, то есть увеличат его частоту.

По книге

Поведение, которое чаще возникает при одних антецедентных обстоятельствах, чем при других, называется дискриминированным оперантом. Поскольку такой оперант чаще встречается в присутствии определённого стимула, чем в его отсутствие, говорят, что он находится под стимульным контролем.

Возьмём реакцию на телефон из врезки 2.1: снятие трубки в ответ на телефонный звонок — это дискриминированный оперант, а сам звонок — это дискриминативный стимул (Сд). Мы снимаем трубку, когда телефон звонит, но не снимаем её, когда он молчит.

По книге

У дискриминативных стимулов — как и у подкреплений или наказаний — нет особых, присущих именно им физических свойств. В ходе оперантного обусловливания может устанавливаться связь между поведением и самыми разными свойствами антецедентного стимула: его формой, размером, цветом, расположением и т. д. Подробнее стимульный контроль обсуждается в главе 17.

Всякий стимул, присутствующий тогда, когда подкрепляется оперантное поведение, приобретает над ним определённый контроль в том смысле, что при предъявлении этого стимула частота данного поведения повышается. Этот стимул не вызывает данное поведение напрямую, не вынуждает организм его совершать, а всего лишь является особенно важной частью обстановки, в которой происходит и подкрепляется поведение. Эта особенность отражена в термине «дискриминативный стимул».

По книге

Когда частота некоторого поведения в присутствии некоторого стимула выше, чем в его отсутствие, говорят, что действует стимульный контроль. Это одно из центральных понятий анализа поведения.

Стимульный контроль не требует, чтобы стимул был «осознан» или «понят»: он устанавливается потому, что присутствие стимула прежде сочеталось с определёнными последствиями. Именно поэтому один и тот же стимул может контролировать разное поведение в разных условиях: звук может означать «пора достать бельё из сушильной машины» или «застегни ремень безопасности».

По книге

Первый смысл — зависимость последствия от поведения. Когда говорят, что некое подкрепление (наказание) контингентно с тем или иным поведением, это означает, что для предъявления подкрепления (наказания) сперва должно произойти данное поведение. Например, если учитель говорит ученику: «Назови плотоядного динозавра», то его похвала («Молодец!») будет зависеть от ответа ученика («Тиранозавр»).

Второй смысл — просто вероятностная временная последовательность из поведения и его последствий. Как говорилось выше, поведение отбирается за счёт своих немедленных последствий независимо от того, были ли эти последствия напрямую вызваны поведением. В таком смысле использует слово «контингентность» Скиннер, когда пишет: «Для организма единственное существенное свойство контингентности — временнóе» (Skinner, 1953, с. 85).

По книге

Отбор операнта описывается трёхчленной последовательностью — центральным понятием анализа поведения, в которое входят 1) антецедентный стимул, 2) собственно поведение и 3) последствия поведения. На рисунке 2.3 показаны примеры трёхчленной последовательности при положительном и отрицательном подкреплении и наказании. Большая часть того, что известно о прогнозировании и контроле поведения человека, так или иначе связана с трёхчленной последовательностью, которая «считается элементарной анализируемой единицей в анализе оперантного поведения» (Glenn, Ellis and Greenspoon, 1992, с. 1332).

Взаимная связь антецедента, поведения и последствия образует «цепочку подкрепления» (Skinner, 1969, с. 7). Описание взаимодействия организма со средой должно всегда содержать сведения об 1) условиях, при которых возникает некое поведение, 2) самом поведении и 3) подкрепляющих последствиях поведения.

По книге

Рисунок 2.3 показывает четыре трёхчленные последовательности — по одной на каждую клетку матрицы «подкрепление — наказание». В каждой строке слева стоит антецедент, в середине поведение, справа последствие, а крайний правый столбец называет тип операции.

По книге

С помощью экспериментального анализа был сформулирован ряд основных законов поведения, описывающих функциональные зависимости поведения от факторов среды. Эти законы подтверждены сотнями и даже тысячами экспериментов и представляют собой несомненный научный факт. Разработанные на их основе методики хорошо зарекомендовали себя в естественных условиях применительно к самым разным формам поведения.

И всё же не стоит впадать в заблуждение, будто мы уже почти всё знаем о том, как прогнозировать и исправлять поведение человека. Прикладной анализ поведения — молодая наука, которой ещё очень далеко до полного понимания поведения человека и полноценного контроля над ним. Специалистам приходится иметь дело с чрезвычайно сложным объектом — поведением человека, — причём их задача усложняется тем, что работать приходится в естественных, а не в лабораторных условиях, создание которых было бы технически, экономически или этически невозможным.

Сложность поведения человека по большей части объясняется тремя основными причинами: богатством поведенческого репертуара, разнообразием внешних факторов, влияющих на поведение, и индивидуальными различиями.

По книге

Поведение человека невероятно разнообразно. Дополнительную сложность ему придают последовательности поведенческих реакций, иногда кажущиеся лишёнными явной логической структуры (Skinner, 1953). Результат одной поведенческой реакции тянет за собой другую.

По книге

Сложнее всего, пожалуй, вербальное поведение человека (Donahoe and Palmer, 1994; Michael, 2003; Palmer, 1991; Skinner, 1957). Мало того что не все вполне осознают разницу между говорением и действием, так ещё и вербальные операнты могут выступать в роли контролирующих переменных для различных других форм вербального и невербального поведения. Анализ вербального поведения даётся в главе 25.

Оперантное научение не всегда происходит медленно и постепенно. Иногда новые сложные поведенческие репертуары возникают очень быстро, при минимальном обусловливании (Epstein, 1991; Sidman, 1994). Один из типов такого быстрого научения получил название подключения реакций (contingency adduction). Это процесс, при котором ранее сформированное поведение начинает затем вызываться при других условиях и приобретает новую функцию в поведенческом репертуаре человека (Andronis, 1983; Laing and Andronis, 1984).

По книге

Элементы разных форм оперантного поведения, сочетаясь между собой, порождают новые формы оперантного поведения (Glenn, 2004), результаты которых открывают дорогу для приобретения форм поведения, выходящих за рамки возможностей человеческого тела. Разнообразие возможных форм поведения человека, по-видимому, безгранично, тем более что по мере развития цивилизации оперантное поведение производит всё более сложные результаты. Прежде анатомические ограничения препятствовали тому, чтобы в поведенческий репертуар человека входил полёт, но затем поведение человека создало самолёты. Возникновение новых форм оперантного поведения всё меньше и меньше зависит теперь от естественного отбора (Glenn, Ellis and Greenspoon, 1992, с. 1332).

По книге

Данное высказывание относится к вербальному поведению, однако подобная множественность причинно-следственных связей характерна для самых разных форм поведения. Например, Джеффри Спрег и Роберт Хорнер обнаружили, что, препятствуя возникновению определённого проблемного поведения, специалисты одновременно повышали частоту других форм проблемного поведения того же функционального класса (Sprague and Horner, 1992).

Или другой пример: действие аверсивного стимула может подавлять частоту непосредственно предшествующего ему поведения, но вызывать при этом определённое респондентное поведение, а также упреждающее и реактивное избегание — вот три последствия одного события.

Часто поведение оказывается результатом нескольких причин. При так называемом совместном контроле (Lowenkron, 2004) два дискриминативных стимула сочетаются и вызывают общую для них поведенческую реакцию. Кроме того, несколько подкреплений (или наказаний) также могут сочетаться друг с другом, повышая или понижая вероятность возникновения данного поведения в определённой ситуации.

По книге

Подкрепления и наказания часто борются между собой за взаимоисключающие формы поведения: мы не можем, например, одновременно смотреть футбольный матч и полноценно готовиться к экзаменам. Такое взаимодействие нескольких подкреплений/наказаний на поведение иногда называют суммацией: эти факторы как бы алгебраически складываются, и от результата зависит выбор поведения. Впрочем, это не общепринятый термин в анализе поведения.

Формы поведения, казалось бы, принадлежащие к одному и тому же классу реакций, могут подкрепляться разными стимулами. Например, в наблюдениях Дэвида Ричмана с соавт. одно проявление агрессивного поведения было связано с одной формой подкрепления, а другое — с другой (Richman et al., 1999).

Все эти многообразные сочетания поведенческих реакций и средовых факторов затрудняют задачу выявления переменных, влияющих на данное конкретное поведение. Говоря словами Тимоти Воллмера и Тимоти Хакенберга, специалистам приходится работать в условиях, где «подкрепление происходит в сильно зашумлённых условиях» (Vollmer and Hackenberg, 2001, с. 251). Следовательно, всегда надо быть готовым к тому, что сколько-нибудь значимое изменение поведения может потребовать длительного времени и многочисленных проб и ошибок для распутывания сложного клубка факторов.

По книге

И без того трудная задача по изменению поведения человека в «зашумлённых» условиях повседневности, где люди живут, работают и развлекаются, осложняется ещё и тем, что люди зачастую по-разному реагируют на одни и те же обстоятельства. Факт существования индивидуальных различий иногда используют в качестве довода против существования универсальных законов поведения — то есть универсальных форм реагирования на воздействие среды, по крайней мере таких законов, на которых можно было бы построить надёжную методику изменения поведения. Вслед за этим утверждается, что раз люди часто по-разному реагируют на одни и те же внешние воздействия, то и изменение поведения должно идти изнутри человека, а не извне.

На это можно возразить следующее. Наше поведение формируется под влиянием постоянных подкреплений и наказаний: какие-то формы поведения усиливаются, какие-то подавляются. Такова природа оперантного обусловливания; такова природа человека. Поскольку ни один из нас не испытывает ровно тех же воздействий внешней среды, как другой, каждый обладает уникальным опытом — историей подкреплений (history of reinforcement). Этим опытом сформирован уникальный поведенческий репертуар каждого из нас. Этот репертуар определяет человека как личность. «Мы — это то, как мы поступаем; то, как мы научились действовать».

По книге

Таким образом, нет нужды объяснять индивидуальные различия в реакции на внешний стимул некими внутренними свойствами — они являются закономерным результатом разного опыта, разной истории подкреплений у разных людей. Необходимо также принимать во внимание различную чувствительность людей к стимулам (на которую могут влиять, например, глухота или слабое зрение) и различную способность к реагированию (на которую влияют, например, такие состояния, как детский церебральный паралич), и адаптировать методики таким образом, чтобы воздействие подкреплений и наказаний было максимально эффективным (Heward, 2006).

По книге

Дональд Баер писал, что на нынешнем этапе развития некоторые из крупнейших проблем человечества (бедность, наркомания, безграмотность и т. д.) могут оказаться неразрешимыми. Он указал на три препятствия к решению подобных проблем: а) у нас нет пока способов решения этих крупных проблем; б) мы не провели анализ того, каковы могут быть эти способы; в) мы не провели системного анализа рабочих заданий, который потребуется, когда мы наконец отыщем способы для решения этих проблем.

По опыту Баера, те проекты, которые представляются невыносимо длительными, кажутся таковыми потому, что а) отсутствует мощное промежуточное подкрепление, отличное от обычных, и приходится ждать, когда сработают слабые подкрепления, или же б) не составлен надлежащий алгоритм задания, и приходится двигаться путём проб и ошибок. Напротив, если в) имеется мощное промежуточное подкрепление и известно, какие конкретные задачи надо разрешить, большие проблемы распадаются на последовательность решаемых задач по изменению поведения — возможно, у многих людей, — и решение этих задач требует не столько умственных усилий, сколько времени. Проблема оказывается не столько неразрешимой, сколько трудоёмкой и времязатратной (Baer, 1987, с. 335, 336–337).

По книге

И без того трудная задача по изменению поведения человека в «зашумлённых» условиях повседневности осложняется ещё и тем, что применить эффективную методику бывает невозможно из-за инфраструктурных, финансовых, социополитических, юридических или этических причин. Специалисты обычно работают в организациях с весьма ограниченными ресурсами, не позволяющими собрать всю необходимую информацию для анализа. Выбор методик может сужаться из-за вмешательства родителей, администраторов и даже широкой общественности («Мы не хотим, чтобы школьники учились за жетоны» и т. п.). Юридические и этические соображения могут сделать невозможным экспериментальный поиск контролирующих поведение переменных. Этические проблемы прикладного анализа поведения разбираются в главе 29.

В сочетании с обсуждавшимися выше сложностями поведения человека и внешних влияний на него эти затруднения делают работу поведенческого аналитика поистине тягостной. Однако она осуществима — и мало что в жизни приносит столь же радостные результаты и столь же драгоценно для улучшения человечества.

По книге

Иногда приходится слышать, что научное описание поведения якобы уменьшит богатство и радость человеческих переживаний. Спрашивают, например, не поблекнет ли восприятие красивых картин или прекрасных симфоний, если мы будем больше знать о факторах, влияющих на творческое поведение; не разочаруемся ли мы в гениальности их создателей. Авторы убеждены, что нет, и приводят рассуждение Тони Невина.

В конце «Происхождения видов» (1859) Чарльз Дарвин предлагает взглянуть на заросший берег с его многообразными растениями, птицами, насекомыми и червями, удивиться сложности, разнообразию и взаимозависимости его обитателей и восхититься тем, что всё это — результат законов размножения, борьбы за существование и естественного отбора. Наш восторг при созерцании этого берега и умиление его обитателями нисколько не страдают от того, что мы понимаем законы эволюции. Равным образом, и восхищение сложным поведением человека, и любовь к конкретным людям, проявляющим то или иное поведение, ничуть не пострадают от нашего пока ещё скромного, но постоянно растущего знания законов поведения (из личной переписки, 19 декабря 2005 г.).

По книге: поведение (пп. 1–7)

1. В самом общем смысле поведение — это деятельность живых организмов.
2. В более строгом смысле поведение — это такое взаимодействие организма со средой, которое характеризуется заметным изменением положения какой-либо части организма в пространстве с течением времени и приводит к заметному изменению хотя бы одного параметра среды (Johnston and Pennypacker, 1993, с. 23).
3. Слово «поведение» обычно используется применительно к комплексам (классам) реакций, сходным либо топографически (какими частями тела и как они осуществляются), либо функционально.
4. Конкретное проявление некоторого поведения называется реакцией.
5. Конкретная реализация поведения в пространстве (движения частей тела) называется топографией реакции.
6. Класс реакций — это группа топографически различных реакций, производящих сходное воздействие на среду.
7. Термином «поведенческий репертуар» обозначаются либо все формы поведения, на которые способен данный человек, либо формы его поведения, подходящие для решения той или иной задачи.

По книге: среда (пп. 8–15)

8. Среда — это та физическая обстановка, в которой существует организм или его наблюдаемая часть.
9. Стимул — это «некоторое количество энергии внешней среды, воспринимаемое организмом с помощью рецепторных клеток» (Michael, 2004, с. 7).
10. Среда влияет на поведение не столько за счёт постоянного, сколько за счёт меняющегося действия стимулов.
11. Стимулы можно классифицировать на основании их внешних (в первую очередь физических), временных (например, времени возникновения по отношению к интересующему поведению) и функциональных (влияния на поведение) свойств.
12. Класс стимулов — это группа стимулов, имеющих общие физические, временные или функциональные свойства.
13. Условия или стимулы, возникающие до интересующего поведения, называются антецедентами.
14. Стимулы, следующие за интересующим поведением, называются последствиями.
15. Стимулы могут оказывать мгновенное (но непродолжительное) влияние на частоту текущего поведения или отсроченное (но стойкое) влияние на частоту будущего поведения. Эти два типа влияний могут сочетаться.

По книге: респондентное поведение (пп. 16–22)

16. Респондентное поведение возникает в ответ на антецедентные стимулы.
17. Рефлекс — это последовательность из антецедентного стимула и респондентного поведения, которое этот стимул вызывает (например, яркий свет — сужение зрачков).
18. Все здоровые особи одного вида рождаются с одним и тем же репертуаром безусловных рефлексов.
19. Безусловный рефлекс — это респондентное поведение (например, слюноотделение) при предъявлении безусловного стимула (например, пищи).
20. Условный рефлекс — это результат респондентного (классического, павловского) обусловливания: предъявления нейтрального стимула в сочетании с безусловным до тех пор, пока нейтральный стимул не станет условным стимулом, вызывающим ту же самую реакцию, что и безусловный.
21. Условный рефлекс можно выработать и при сочетании нейтрального стимула с условным — это так называемое респондентное обусловливание второго порядка.
22. Повторное предъявление условного стимула в отсутствие безусловного стимула подавляет условный рефлекс; этот феномен называется угасанием, а способ выработки угасания — гашением.

По книге: оперантное поведение (пп. 23–38)

23. Оперантное поведение определяется своими последствиями.
24. В отличие от респондентного поведения, которое состоит из набора заранее заданных реакций со строго определёнными функциями, оперантное поведение практически безгранично в своём разнообразии.
25. Отбор поведения по его последствиям происходит в течение всей жизни организма (онтогенеза) и представляет собой параллель дарвиновскому естественному отбору, действующему на протяжении эволюционной истории вида (филогенеза).
26. Оперантное обусловливание происходит путём подкрепления и наказания в соответствии со следующими принципами: последствия поведения могут влиять только на будущее поведение; отбор по последствиям касается классов реакций, а не конкретных реакций; наибольшее влияние на поведение оказывают его незамедлительные последствия; последствия влияют на любое предшествующее им поведение.
27. Изменения стимулов, вызывающие подкрепление или наказание, бывают следующими: а) добавление во внешнюю среду нового стимула; б) удаление действующего стимула из внешней среды.
28. Если сразу вслед за тем или иным поведением предъявляется стимул, повышающий будущую частоту этого поведения, то это называется положительным подкреплением.
29. Если сразу вслед за тем или иным поведением перестаёт действовать некий стимул и это повышает будущую частоту данного поведения, то это называется отрицательным подкреплением.
30. Стимулы, удаление которых вызывает подкрепление, часто называются аверсивными.
31. Отсутствие подкрепления для прежде подкрепляемого поведения снижает частоту этого поведения до первоначального уровня; это называется угасанием.
32. Если сразу вслед за тем или иным поведением предъявляется стимул, понижающий будущую частоту этого поведения, то это называется положительным наказанием.
33. Если сразу вслед за тем или иным поведением перестаёт действовать некий стимул и это понижает будущую частоту данного поведения, то это называется отрицательным наказанием.
34. Законы поведения описывают функциональные зависимости поведения от факторов среды (контролирующих переменных), справедливые для разных видов, разных внешних условий и разных форм поведения.
35. Методика изменения поведения — это внутренне непротиворечивый способ изменения поведения, основанный на одном или нескольких законах поведения.
36. Подкрепления и наказания, способные влиять на поведение сразу же, независимо от того, сталкивался ли организм с ними прежде, называются безусловными.
37. Стимулы, выступающие в качестве условных подкреплений и наказаний, приобретают эту способность за счёт предварительного сочетания с другими подкреплениями и наказаниями.
38. Эффективность подкреплений и наказаний зависит от мотивационных условий. Например, мотивационными условиями, влияющими на эффективность пищи как подкрепления, будут сытость или, наоборот, голод.

По книге: стимульный контроль (пп. 39–43)

39. Поведение, чаще возникающее после одних антецедентов, чем после других, называется дискриминированным оперантом; при этом говорят, что оно находится под стимульным контролем.
40. Стимульным контролем называется зависимость частоты оперантного поведения от наличия или отсутствия тех или иных антецедентных стимулов. Эти стимулы приобретают способность влиять на оперантное поведение благодаря тому, что ранее их присутствие сочеталось с теми или иными последствиями.
41. Трёхчленная последовательность (контингентность) из антецедентного стимула, поведения и его последствия — элементарная единица анализа оперантного поведения.
42. Когда говорят, что некое подкрепление (наказание) сопряжено с тем или иным поведением, это означает, что для предъявления подкрепления (наказания) сперва должно произойти данное поведение.
43. Все методики прикладного анализа поведения связаны с воздействием на один или несколько компонентов трёхчленной последовательности.

По книге: сложность поведения (пп. 44–47)

44. Поведение человека невероятно разнообразно. Дополнительную сложность придают ему поведенческие цепочки и вербальное поведение.
45. Причины поведения человека часто очень сложны. Многие формы поведения имеют не одну, а сразу несколько причин.
46. Анализ и контроль поведения человека усложняются уникальностью пережитого опыта (истории подкреплений) у каждого человека, а также существованием расстройств, влияющих на восприятие внешних стимулов, моторику и проч.
47. Специалисты в области прикладного анализа поведения нередко вынуждены сталкиваться в своей работе с различными финансовыми, инфраструктурными, социополитическими, правовыми и этическими затруднениями.