Часть 1 · Глава 2 · Урок 2
Оперантное поведение: отбор по последствиям
Это центральный урок главы. Здесь появляется то, на чём держится почти вся практика анализа поведения: поведение, которое отбирается своими последствиями. Мы разберём, чем оперантное поведение отличается от респондентного, почему последствия действуют только на будущее, что именно подкрепляется — реакция или класс реакций, почему важна секундная точность и как устроена таблица «подкрепление — наказание».
1-100.md, строки 4119–5098 (печатные с. 34–44).
Внутри: определение оперантного поведения, таблица 2.3, отбор по последствиям, онтогенез и филогенез, оперантное обусловливание, четыре положения о последствиях, врезка 2.1 о телефонном звонке, автоматизм подкрепления, положительное и отрицательное подкрепление, наказание и его виды, врезка 2.2 о законах и методиках, безусловные и условные подкрепления и наказания, мотивационные условия, критика Морза и Келлехера.
По книге
Урок 2.1 закончился на респондентном поведении: организм рождается с набором готовых рефлексов и может приобретать условные. Этого недостаточно. Животное, у которого есть только генетически запрограммированные реакции на внешние стимулы, плохо выжило бы в условиях, отличающихся от тех, в которых жили его предки. Респондентное поведение не предполагает возможности учиться на результатах.
Организм, чьё поведение не меняется в зависимости от последствий, которые оно оказывает на среду, не сможет приспособиться к её изменениям. Поэтому помимо рефлексов человек получает в наследство способность к свободному поведению, которое очень пластично и может меняться в зависимости от своих последствий. В книге это поведение называется оперантным.
1. Что такое оперантное поведение
Оперантное поведение (operant behavior)
Поведение, частота которого определяется в первую очередь его последствиями. В отличие от респондентного поведения, которое вызывается антецедентами (предшествующими событиями), оперантное поведение отбирается, формируется и поддерживается теми событиями, которые за ним следуют.
По книге
Исходный пример — младенец в кроватке. Он бьёт руками по подвесной игрушке, качающейся над ним. Он в буквальном смысле воздействует на среду, совершает операцию над ней и тут же получает в ответ изменение стимула — движение игрушки и её мелодичное позвякивание. Действия ребёнка постоянно меняются в зависимости от результата, к которому приводят.
В противоположность респондентному поведению, которое состоит из набора заранее заданных реакций со строго определёнными топографией и функциями, оперантное поведение практически безгранично в своём разнообразии. Форма и функции респондентного поведения постоянны и выводятся из его топографии: слюноотделение проявляется всегда одинаково и имеет одни и те же функции. «Смысл» оперантного поведения из топографии невыводим.
Пример из книги
«Помещение рук под текущую воду». Это описание адекватно передаёт поведение с точки зрения топографии. Но если назвать его «Мытьём рук», речь уже идёт об оперантном поведении, которое определяется тем, что когда человек прежде так себя вёл, его руки становились чище. Это подкрепляло поведение, потому что, например, сводило к минимуму риск заражения или предотвращало порицание окружающих. Внешне точно такое же действие будет другим оперантным поведением, если подкрепление состояло просто в приятном освежающем ощущении от холодной воды или в подражающем поведении ребёнка, которого приучают мыть руки (Skinner, 1969, с. 127).
По книге
Функционально равноценное оперантное поведение может проявляться по-разному: посетитель ресторана может попросить у официанта воды, кивнув головой, показав пальцем на стакан или ответив «да» на вопрос, не хочет ли он воды. Более того, одинаковые движения в разных условиях могут быть проявлениями разного оперантного поведения.
В сноске книга уточняет важную речевую привычку: про оперантные реакции обычно говорят, что они осуществляются, а не запускаются. Тем самым подчёркивают зависимость таких реакций прежде всего от последствий, а не от пусковых (антецедентных) стимулов.
От меня
Слово «оперант» означает «операция», «действие». Оперантное поведение — это поведение, которое оперирует со средой и тем самым производит последствия. Не «стимул дёрнул за верёвочку», а «организм сделал нечто, среда ответила, и от ответа зависит, будет ли организм делать это снова». Эта смена точки зрения — главный сдвиг всей книги.
2. Восемь различий с респондентным поведением
По книге
В таблице 2.3 приведены основные различия между респондентным и оперантным поведением. Она полезна как справочник: к этим восьми строкам придётся возвращаться в главах о респондентном и оперантном обусловливании.
| Критерий | Респондентное поведение | Оперантное поведение |
|---|---|---|
| Определение | Поведение, вызываемое антецедентными стимулами | Поведение, отобранное по своим последствиям |
| Элементарная единица | Рефлекс: антецедентный стимул вызывает реакцию (модель «стимул — реакция») | Класс реакций-оперантов: группа реакций, одинаковым образом действующая на среду; описывается трёхчленной последовательностью «стимул — поведение — последствие» |
| Примеры | Сжатие кулака новорождённого в ответ на надавливание на ладонь, сосательные движения, сужение зрачков на яркий свет, кашель и рвотные движения при раздражении глотки, слюноотделение при запахе пищи, отдёргивание руки от болевого раздражителя, половое возбуждение | Речь, ходьба, игра на фортепиано, езда на велосипеде, вычисление сдачи, приготовление пирога, удар битой по летящему мячу, смех в ответ на шутку, мысли о родителях, чтение этой книги |
| Типичные эффекторы | В основном гладкие мышцы и железы внешней и внутренней секреции, реже — поперечнополосатые мышцы (например, разгибание голени при постукивании по сухожилию под надколенником) | В основном поперечнополосатые мышцы, реже — гладкие мышцы и железы внешней и внутренней секреции |
| Польза для организма | Экономия ресурсов; набор готовых жизненно важных реакций, которым организм не успел бы самостоятельно научиться | Возможность взаимодействия с постоянно меняющейся средой, которое не могла бы предусмотреть эволюция |
| Польза для вида | Способствует сохранению и распространению вида — косвенно (защитные рефлексы помогают дожить до репродуктивного возраста) и напрямую (рефлексы, связанные с размножением) | Особи, лучше приспосабливающиеся к последствиям своего поведения, с большей вероятностью выживут и оставят потомство |
| Обусловливание | Респондентное (классическое, павловское): нейтральный стимул предъявляется перед безусловным или одновременно с ним и становится условным, вызывая условный рефлекс | Оперантное: изменение стимула сразу вслед за реакцией увеличивает (подкрепление) или уменьшает (наказание) будущую частоту таких же реакций; прежде нейтральные стимулы могут стать условными подкреплениями или наказаниями |
| Границы репертуара | Проявления и функции определены филогенезом; все здоровые особи вида имеют одинаковый набор безусловных рефлексов; новые формы не приобретаются, но можно выработать неограниченное число условных рефлексов | Отбирается последствиями; новое и всё более сложное поведение приобретается в течение всей жизни (онтогенеза); результаты иногда позволяют делать то, что не предусмотрено анатомией (самолёты позволяют человеку летать) |
От меня
Обратите внимание: таблица не говорит, что респондентное поведение «плохое» или «низшее». Она говорит, что у него другая функция и другой механизм изменения. Респондентное поведение экономит ресурсы и даёт готовые защиты; оперантное даёт гибкость. В реальном поведении они почти всегда переплетены: страх перед выступлением — респондент, а отказ от выступления — оперант, подкрепляемый устранением страха.
3. Отбор по последствиям: Дарвин, жирафы и Скиннер
Цитата из книги
«Поведение человека — это сумма 1) реакций выживания, ответственных за естественный отбор вида, и 2) подкрепляемых реакций, создающих репертуар каждой особи вида, в том числе 3) особых реакций, формируемых под действием сложившегося общественного окружения. (Разумеется, в конечном счёте и второй, и третий пункты — тоже результат естественного отбора, поскольку оперантное обусловливание — это наработанный эволюцией процесс, а общественные традиции — лишь частные случаи оперантного обусловливания.)»Б. Ф. Скиннер, 1981, с. 502 — цитируется в 1-100.md, строки 4156–4176
По книге
Описание Скиннером оперантного поведения по праву считается революцией в науке о поведении — «краеугольным камнем, на котором зиждятся все остальные принципы поведения» (Glenn, 2004, с. 134). Принцип отбора по последствиям (selection by consequences) использует новую парадигму биологии — селекционизм. Она гласит, что все формы жизни, от простейших одноклеточных до сложных многоклеточных организмов, сформировались в процессе эволюции за счёт отбора, действующего на их функционирование (Pennypacker, 1994, с. 11–12).
Отбор по последствиям (selection by consequences)
Принцип, согласно которому формы поведения отбираются, закрепляются или исчезают в зависимости от своих последствий — так же, как формы жизни отбираются естественным отбором. В течение жизни организма (онтогенеза) он представляет собой параллель дарвиновскому естественному отбору, действующему на протяжении эволюционной истории вида (филогенеза).
Онтогенез (ontogeny)
Индивидуальное развитие организма, история его взаимодействий со средой в течение жизни. Именно в онтогенезе работает отбор оперантного поведения по последствиям.
Филогенез (phylogeny)
Эволюционная история вида. Филогенез определяет набор безусловных рефлексов и способность определённых стимулов выступать безусловными подкреплениями или наказаниями.
Пример из книги
Почему у жирафа длинная шея. Уильям Баум объясняет это так. Члены любой популяции отличаются друг от друга — отчасти потому, что на них по-разному действовала среда (например, они получали разное количество пищи), отчасти из-за разных генов. Среди предков жирафов, живших когда-то на территории нынешнего национального парка Серенгети, у кого-то шея была длиннее, у кого-то короче. Животные с более длинной шеей могли доставать до листьев на высоких ветках и питались в среднем лучше. Они были чуть здоровее, лучше справлялись с болезнями и чуть удачнее убегали от хищников. Любой длинношеий предок в отдельности мог умереть, не оставив потомства, но в среднем длинношеие оставляли больше потомков. По мере того как их становилось больше, возникали новые генетические комбинации, шеи новых поколений становились ещё длиннее. Так длинношеие жирафы постепенно вытесняли короткошеих, и средняя длина шеи в популяции увеличивалась (Baum, 1994, с. 52).
По книге
Аналогия работает и для поведения. Подобно тому как для естественного отбора нужна популяция чем-то различающихся между собой организмов, для отбора оперантного поведения по его последствиям нужны различия в поведении. Поведение, которое вызывает наиболее благоприятные последствия, отбирается и закрепляется в репертуаре, в результате чего организм лучше приспосабливается к условиям.
Естественный отбор наделил человека склонностью к разным формам свободного поведения — младенческому лепету, бесцельному шевелению руками и ногами, — которое чрезвычайно пластично и регулируется своими последствиями. Сигрид Гленн замечает: снабдив человека во многом свободным поведенческим репертуаром, естественный отбор дал нашему виду возможность приспосабливать поведение к совершенно разным условиям; но такой свободный репертуар был бы смертелен без способности к отбору подходящих форм поведения. Хотя эта способность есть у разных видов, у человека она особенно развита (Glenn, 2004, с. 139).
Повреждённый фрагмент источника, требуется проверка
Строки 4255–4274 переплетены с соседней колонкой: фраза о Пеннипакере, цитата о Дарвине и начало рассказа про жирафов разорваны посередине. Смысл восстанавливается, но дословные границы цитат Пеннипакера и Баума требуют сверки с бумажной книгой. В уроке они переданы по смыслу, а не как точные цитаты, кроме тех мест, где текст читается однозначно.
4. Оперантное обусловливание и подкрепление
Цитата из книги
«Оперантное обусловливание можно наблюдать во всём многообразии деятельности человека, от его рождения до самой смерти… Его результаты видны в наших тончайших способностях к различению, в наших изощрённейших умениях, в наших самых ранних и грубых привычках и в наших возвышеннейших творческих помыслах».Keller and Schoenfeld, 1950, с. 64 — цитируется в 1-100.md, строки 4280–4292
Оперантное обусловливание (operant conditioning)
Избирательное влияние последствий поведения на само поведение. Под последствиями в контексте оперантного обусловливания понимают изменения стимула, происходящие достаточно быстро после некоторого поведения и влияющие на частоту этого поведения в будущем.
Цитата из книги
«При оперантном обусловливании мы „подкрепляем“ оперантное поведение в том смысле, что повышаем его вероятность или — как это видно из наблюдений — его фактическую частоту».Skinner, 1953, с. 65 — цитируется в 1-100.md, строки 4310–4315
По книге
Если младенец, лежащий в кроватке, начинает чаще попадать рукой по подвесной игрушке, перед нами пример оперантного обусловливания. Если частота наблюдаемого поведения увеличивается, говорят, что произошло подкрепление (reinforcement). Подкреплениями (reinforcers, часто также «подкрепители») называют и последствия поведения, которые повышают его частоту, — в нашем случае движение и звук подвесной игрушки.
Именно подкрепление обычно имеют в виду, когда говорят об оперантном обусловливании. Однако, как отмечал Скиннер, при оперантном обусловливании поведение может не только усиливаться, но и тормозиться. Если бы качание и позвякивание игрушки сопровождалось тем, что ребёнок стал реже бить по ней, мы говорили бы, что произошло наказание (punishment), и сами стимулы — движение и звук игрушки — также называли бы наказаниями (punishers).
Цитата из книги
«Единственная значимая для организма характеристика связи между поведением и его последствием — временная: подкрепление просто следует за поведением. Почему следует — неважно».Skinner, 1953, с. 85, курсив автора — цитируется в 1-100.md, строки 4614–4620
По книге
Принципиальная случайность подкрепления (или наказания) иллюстрируется существованием странных форм поведения, которые не несут никакой очевидной функции, — например, суеверным ритуалом игрока в покер, который похлопывает и располагает карты определённым образом, потому что в прошлом после подобных действий ему выпала удачная карта.
Иногда для того, чтобы изменилось поведение, достаточно однократного подкрепления, но гораздо чаще для сколько-нибудь заметного изменения требуются повторные подкрепления.
От меня
Слово «подкрепление» в книге используется в двух связанных смыслах: как процесс (частота выросла — произошло подкрепление) и как стимул (движение игрушки — подкрепление). Это не путаница, а разные стороны одного явления. Но в разговоре полезно уточнять: «подкрепление как операция» или «подкрепление как стимул». Дальше в книге это различение будет важно при обсуждении режимов подкрепления.
5. Положение 1: последствия влияют только на будущее
По книге
Последствия поведения способны влиять только на будущее поведение — в частности, на относительную частоту, с которой подобное поведение будет в дальнейшем возникать при наличии сходных стимульных условий.
Может показаться, что это утверждение самоочевидно: логически и физически невозможно, чтобы последствия влияли на предшествующее им поведение, ведь к тому моменту, как возникли последствия, поведение уже закончилось. Именно из-за этой невозможности фраза «поведение определяется своими последствиями» вводит многих в недоумение (см. врезку 2.1), и именно поэтому книга оговаривает её здесь.
Пример из книги
Врезка 2.1. Когда звонит телефон. Студент спрашивает профессора: если я снимаю трубку, когда звонит телефон, разве это не оперантное поведение? Ведь звонок предшествует моей реакции, а не следует за ней. Профессор отвечает: вы снимаете трубку не просто от звука звонка, а потому, что раньше, поднимая трубку, слышали голос человека на другом конце провода. Именно возможность поговорить — последствие снятия трубки — определяет поведение. Но почему вы снимаете трубку только тогда, когда телефон звонит? Потому что вы знаете: только сняв трубку звонящего телефона, вы услышите голос. Антецедентный стимул указывает, какое последствие следует ожидать. Эта цепочка из стимула, поведения и его последствия называется трёхчленной последовательностью — одним из центральных понятий прикладного анализа поведения.
По книге
Тот же аргумент разбирается на примере водителя, который нажимает на тормоз, когда загорается красный свет. Нажатие на педаль зависит от красного сигнала, а сигнал не является последствием поведения. И на примере ребёнка, который пишет «4» в ответ на «2 + 2»: написание цифры определяется исходной задачей, иначе как получить правильный ответ?
Ответ во всех случаях один. Оперантное поведение в конечном счёте определяется своими последствиями, а антецедентные стимулы лишь указывают на то, какое последствие следует ожидать. Стимульный контроль и трёхчленная последовательность подробно разбираются в уроке 2.3.
От меня
Это, пожалуй, самое трудное место главы для новичка. Простое правило: последствие не «толкает» уже совершённое действие, оно меняет вероятность такого действия в будущем. Антецедент не «вызывает» оперантное поведение, он делает определённое последствие ожидаемым. Поэтому оперант описывают трёхчленной последовательностью, а не парой «стимул — реакция».
6. Положение 2: отбираются классы реакций
По книге
Реакции, вызываемые подкреплением предыдущих реакций, будут слегка отличаться от них, но в то же время будут иметь с ними достаточно общего, чтобы вызывать те же последствия. Поведение, возникающее благодаря подкреплению, внешне отличается от первоначального поведения.
Когда мы, например, подкрепляем нажатие на рычаг или произнесение слова «Здравствуйте», мы повышаем вероятность целой группы реакций, внешне довольно разных. Эта особенность имеет важное приспособительное значение: организму было бы очень сложно приобрести эффективный поведенческий репертуар, если бы подкрепление усиливало только какую-нибудь одну реакцию (Skinner, 1969, с. 131).
Эти внешне различные, но функционально схожие реакции составляют класс оперантных реакций. Давая определение понятию «оперант», Уильям Баум писал, что это «класс действий, оказывающих одинаковое влияние на внешнюю среду» (Baum, 1994, с. 75). Именно классы реакций, а не отдельные реакции подкрепляются или подавляются при оперантном обусловливании.
Цитата из книги
«…имеются в виду, когда говорится, что подкрепление увеличивает частоту типа поведения, которое непосредственно ему предшествует».Michael, 2004, с. 9 — цитируется в 1-100.md, строки 4470–4474
Пример из книги
Игрушка переехала. Если бы качание и звон подвесной игрушки подкрепляли только конкретные движения одной руки ребёнка и никакие другие, то ребёнок не смог бы больше доставать до игрушки, если бы мать однажды перевесила её в другое место над кроваткой. Лишённое подкрепления поведение вскоре бы угасло. Но поскольку подкрепляется класс действий, ребёнок может ударить по игрушке другой рукой, ногой или иначе — и поведение сохранится.
Дополнительный учебный пример
Не из книги. Ребёнок учится просить воды. Сначала он тянется к стакану, потом начинает говорить «дай», потом показывает на холодильник. Взрослый подкрепляет все эти разные движения одним и тем же — даёт воду. Подкрепляется не «движение правой рукой», а класс «попросить воды». Если бы подкреплялось только одно движение, ребёнок не смог бы попросить воду, когда стакан стоит в другом месте или руки заняты.
7. Положение 3: решают незамедлительные последствия
По книге
Поведение наиболее восприимчиво к мгновенным последствиям, наступающим в первые несколько секунд после него. Необходимо подчеркнуть важность того, чтобы подкрепление наступало безотлагательно. События, отсроченные более чем на несколько секунд, не влияют напрямую на будущую частоту поведенческих реакций.
Даже поведение человека, как будто регулируемое своими отдалёнными последствиями, на самом деле испытывает влияние сложных речевых и общественных стимулов, а не самих отдалённых последствий. Чем дальше ответное изменение стимула отстоит от реакции, тем менее эффективным будет наказание для изменения частоты соответствующей реакции. О хронологических границах, в пределах которых наказание сохраняет эффективность, пока ещё мало что известно (Michael, 2004, курсив автора).
Пример из книги
Зарплата и еда. Отправляясь каждый день на работу, человек зарабатывает деньги, на которые покупает пищу. Но собственно поедание этой пищи слишком далеко отстоит по времени от того поведения, которым она была заработана, чтобы непосредственно на него влиять. На поведение главным образом влияют не медленные его последствия, а более близкие события: зарплата, похвала, социальные сигналы, правила.
От меня
Отсюда практическое правило: если вы хотите изменить поведение, ищите последствие, которое можно предъявить сразу. «В конце месяца получишь премию» работает не через саму премию, а через правила, обещания и социальные стимулы, которые человек сформулировал и которые действуют в момент поведения. Это не отменяет отдалённые последствия — но объясняет, почему они часто проигрывают сиюминутным.
8. Положение 4: последствия действуют на любое поведение
По книге
Подкрепление и наказание абсолютно беспристрастны и одинаково действуют на любое поведение, от которого не требуется быть ни логичным, ни, строго говоря, полезным. Любое поведение, непосредственно предшествующее подкреплению (или наказанию), будет подкреплено (или, наоборот, подавлено).
Между поведением и его последствием действует лишь одна функциональная связь — хронологическая. «Единственная значимая для организма характеристика связи между поведением и его последствием — временная: подкрепление просто следует за поведением. Почему следует — неважно» (Skinner, 1953, с. 85, курсив автора).
Принципиальная случайность подкрепления иллюстрируется существованием странных форм поведения, не несущих очевидной функции. Суеверный ритуал игрока в покер, который похлопывает и располагает карты определённым образом, потому что в прошлом после подобных действий ему выпала удачная карта, — пример такого поведения.
От меня
Это положение объясняет, почему в жизни закрепляется не только полезное. Ребёнок, который случайно получил внимание за крик, будет кричать чаще — не потому, что крик «логичен», а потому, что он хронологически предшествовал подкреплению. Специалист по анализу поведения поэтому не спрашивает «зачем человек это делает?» в смысле «какой умысел?». Он спрашивает: «какое последствие следует сразу за этим поведением и как оно меняет его частоту?»
9. Матрица: подкрепление и наказание
По книге
И подкрепление, и наказание может осуществляться путём одной из двух противоположных операций: либо привнесением нового стимула (как вариант — усилением уже действующего), либо устранением действующего стимула (как вариант — ослаблением его действия) (Morse and Kelleher, 1977; Skinner, 1953).
На рисунке 2.2 это представлено таблицей 2×2. По горизонтали — характер изменения стимула: появление или усиление стимула; ослабление или исчезновение стимула. По вертикали — направление изменения поведения: повышение или понижение будущей частоты.
| Изменение стимула | Повышает будущую частоту | Понижает будущую частоту |
|---|---|---|
| Стимул появляется или усиливается | Положительное подкрепление | Положительное наказание |
| Стимул ослабляется или исчезает | Отрицательное подкрепление | Отрицательное наказание |
От меня
Запомните два независимых вопроса: (1) стимул добавили или убрали? (2) поведение стало чаще или реже? Слова «положительное» и «отрицательное» здесь не означают «хорошее» и «плохое» — это математический знак операции: плюс — добавили, минус — убрали. Наказание при этом всегда определяется по результату: частота упала. Если частота не упала, это не наказание, что бы вы ни делали.
10. Положительное и отрицательное подкрепление
Подкрепление (reinforcement)
1. Изменение стимула сразу после некоторой поведенческой реакции, приводящее к повышению будущей частоты реакций такого класса в сходных условиях. 2. Стимул (или его изменение), повышающий будущую частоту поведенческих реакций, непосредственно ему предшествующих (reinforcer).
Положительное подкрепление (positive reinforcement)
Увеличение частоты некоторого поведения после действия на организм стимула сразу вслед за проявлением такого поведения. Стимул добавляется или усиливается. В примере с ребёнком и подвесной игрушкой всё более частое попадание рукой по игрушке, от которого она качается и звенит, представляет собой положительное подкрепление.
Пример из книги
Похвала за самостоятельную игру. Ребёнка постарше хвалят за то, что он играет самостоятельно, не приставая ко взрослым. Похвала следует сразу за игрой и повышает вероятность, что ребёнок будет играть сам и дальше. Это положительное подкрепление. Его использование для выработки желаемого поведения подробно рассматривается в главе 11.
Отрицательное подкрепление (negative reinforcement)
Увеличение частоты некоторого поведения вследствие того, что сразу вслед за ним исчезали или ослабевали некие стимулы. Стимул устраняется или ослабляется. Отрицательное подкрепление лежит в основе реакций избегания.
Аверсивный стимул (aversive stimulus)
Как правило, болезненный или в ином отношении неприятный стимул (или условие), обладающий свойством: а) вызывать поведение, приводившее в прошлом к удалению данного стимула; б) выступать в роли наказания, если предъявляется после поведения; в) выступать в роли отрицательного подкрепления, если устраняется вследствие поведения.
Пример из книги
Мелодия, которая замолкает. Родители запрограммировали подвесную игрушку так, что какое-то время она постоянно играет мелодию. Как только ребёнок попадает по игрушке рукой или ногой, мелодия на несколько секунд прекращается. Если в такой ситуации ребёнок начинает бить по игрушке чаще, перед нами отрицательное подкрепление, а мелодия игрушки — аверсивный стимул.
По книге
Отрицательное подкрепление лежит в основе реакций избегания. Ребёнок в примере избегает слушания мелодии, ударяя по игрушке. Человек, выскакивающий из-под слишком горячего душа, избегает обжигающей воды. Школьник, выгнанный с урока за плохое поведение, весьма вероятно, избегает таким образом неприятных для него классных занятий, и дальнейшее учащение его хулиганского поведения в классе свидетельствует о состоявшемся отрицательном подкреплении.
По книге
Среди изучающих поведенческий анализ понятие отрицательного подкрепления вызывает много недоразумений, что в значительной степени связано с непростой историей термина и с его неточным использованием в учебниках по психологии и педагогике. Чаще всего делают ошибку, считая отрицательное подкрепление синонимом наказания.
Чтобы избежать этой ошибки, Джек Майкл предлагает представить, как вы ответите на два вопроса: 1) нравится ли вам отрицательное подкрепление и 2) какое подкрепление вы предпочитаете — положительное или отрицательное. На первый вопрос нельзя ответить иначе, чем утвердительно: разумеется, вам нравится устранение или прекращение действия неприятного для вас стимула, — именно это и ничего более термин «отрицательное подкрепление» и означает. На второй вопрос правильный ответ: не зная деталей того, как именно будет осуществляться положительное и отрицательное подкрепление, выбрать предпочтительное невозможно.
Типичная ошибка — сразу предпочесть положительное подкрепление. Но устранение очень сильной боли (отрицательное подкрепление) несомненно предпочтительнее небольшого денежного или пищевого вознаграждения (положительное подкрепление) — если, конечно, вам не пришлось до этого долго голодать.
От меня
Проверочный вопрос для любого случая: «Что произошло со стимулом и что стало с частотой поведения?» Если стимул убрали, а поведение стало чаще — это отрицательное подкрепление. Если стимул убрали, а поведение стало реже — это отрицательное наказание. Если стимул добавили, а поведение стало реже — положительное наказание. Если добавили и стало чаще — положительное подкрепление. Всего четыре клетки, и каждая определяется результатом, а не намерением взрослого.
11. Наказание и его виды
Наказание (punishment)
Функциональное определение: если некоторое поведение сопровождается тем или иным стимулом и в результате частота данного поведения в сходных условиях уменьшается, значит, состоялось наказание. Как и подкрепление, наказание может вызываться двумя противоположными изменениями стимула.
По книге
Большинство специалистов в области анализа поведения понимают под наказанием последствие поведения, которое понижает будущую частоту этого поведения (Azrin and Holz, 1966). В литературе использовались многообразные термины для обозначения двух операций, которые удовлетворяют этому определению. Например, Сертификационная комиссия поведенческих аналитиков (BACB — Behavior Analyst Certification Board), а также авторы некоторых учебников (в частности, Раймонд Милтенбергер) пользуются терминами положительное наказание и отрицательное наказание — в параллель к терминам положительное и отрицательное подкрепление (BACB, 2005; Miltenberger, 2004).
Как и в случае с подкреплением, слова «положительное» и «отрицательное» не имеют здесь оценочного значения, а относятся лишь к характеру изменения стимула: при положительном наказании стимул привносится, при отрицательном — устраняется.
Положительное наказание (positive punishment)
Предъявление стимула сразу после некоторой поведенческой реакции, приводящее к снижению будущей частоты реакций такого класса в сходных условиях. Иногда называется наказанием типа I.
Отрицательное наказание (negative punishment)
Устранение (или снижение интенсивности) стимула сразу после некоторой поведенческой реакции, приводящее к снижению будущей частоты реакций такого класса в сходных условиях. Иногда называется наказанием типа II.
По книге
Несмотря на тесную связь терминов «положительное» и «отрицательное наказание» с терминами «положительное» и «отрицательное подкрепление», их значение не столь очевидно, как значение описательных терминов: «наказание путём последующей стимуляции» и «наказание путём отмены положительного подкрепления», введённых Дональдом Уэйли и Ричардом Мэлоттом в их книге «Начала науки о поведении» (Whaley and Malott, 1971). Эти два последних термина подчёркивают методологическое различие между двумя формами наказания, что имеет важное значение для конкретных методик устранения нежелательного поведения.
В 1982 году Ричард Фокс назвал наказание при помощи дополнительной стимуляции и наказание при помощи отмены стимула соответственно наказанием типа I и наказанием типа II (Foxx, 1982). Многие специалисты и педагоги по сей день продолжают использовать терминологию Фокса. Также в ходу другие термины, например «принцип штрафования» (penalty principle; Malott and Trojan Suarez, 2004). Все эти термины — лишь более краткая замена развёрнутым терминам Уэйли и Мэлотта.
Некоторые авторы предпочитают называть наказанием только положительное наказание («наказание типа I» по Фоксу), наряду с которым говорят об «отстранении от подкрепления» и «штрафовании» как об отдельных типах наказания. Однако следует понимать, что эти два последних термина обозначают разновидности отрицательного наказания («наказания типа II» по Фоксу). Отстранение от подкрепления и штрафование (подробнее в главе 15) представляют собой, таким образом, не основные законы оперантного обусловливания, а лишь методические приёмы для изменения поведения.
| Что происходит | Термин BACB | Термин Уэйли и Мэлотта | Термин Фокса |
|---|---|---|---|
| Стимул добавляется, поведение становится реже | Положительное наказание | Наказание путём последующей стимуляции | Наказание типа I |
| Стимул убирается, поведение становится реже | Отрицательное наказание | Наказание путём отмены положительного подкрепления | Наказание типа II (отстранение от подкрепления, штрафование) |
Пример из книги
Отстранение от подкрепления и штрафование. Если ребёнка на короткое время лишают доступа к любимой игре после ссоры с другим ребёнком, это отрицательное наказание типа II. Если у него вычитают часть заработанных жетонов за нарушение правила, это тоже отрицательное наказание типа II, но уже в форме штрафования. Оба приёма не являются отдельными «законами поведения»: они — конкретные методики, построенные на законе наказания.
От меня
В русскоязычной литературе «отрицательное наказание» иногда путают с «отрицательным подкреплением», потому что оба содержат слово «отрицательное». Держите в голове результат: подкрепление — частота выросла, наказание — частота упала. Тогда «отрицательное наказание» = убрали стимул, поведение стало реже. Это не «плохое наказание» и не «наказание злом»; это просто операция вычитания.
12. Законы поведения и методики изменения поведения
По книге
Врезка 2.2 разводит два уровня, которые часто смешивают. Законы поведения (principles of behavior) — это простые функциональные зависимости поведения от тех или иных факторов внешней среды, или контролирующих переменных, описываемые в форме «у = f(x)», подтверждённые в сотнях и тысячах экспериментов и наблюдающиеся у разных представителей одного вида, в разных условиях и при разных формах поведения. Законы поведения — результат обобщения множества экспериментов; они описывают, как осуществляется поведение. Таковы законы подкрепления, наказания и угасания.
Методика изменения поведения (behavior change tactic) — научно обоснованная и внутренне непротиворечивая методика, основанная на одном или нескольких законах поведения и достаточно универсальная (применимая к разным людям, обстановкам и формам поведения), чтобы её можно было чётко описать и широко использовать. Методики составляют технологическую часть прикладного анализа поведения.
| Закон поведения | Методики, построенные на нём |
|---|---|
| Закон подкрепления | Похвала, награждение жетонами, шейпинг, дифференцированное подкрепление |
| Закон наказания | Отстранение от подкрепления, штрафование |
| Закон угасания | Гашение (прекращение подкрепления нежелательного поведения) |
По книге
Итак, законы поведения — это принципы формирования и осуществления поведения, а методики изменения поведения — способы использования этих принципов для обучения людей социально значимым формам поведения. Законов поведения лишь несколько, а методик на их основе множество.
Большинство методик изменения поведения строится сразу на нескольких способах обусловливания. Для специалиста важно хорошо понимать все их: это помогает и в анализе влияющих на поведение переменных, и в разработке и оценке методик исправления поведения.
Дополнительный учебный пример
Не из книги. «Шейпинг» — это методика, а не закон. Закон подкрепления говорит: поведение, за которым сразу следует подкрепление, становится чаще. Шейпинг — это способ применить закон: подкреплять последовательные приближения к цели. Поэтому нельзя сказать «шейпинг — закон поведения»; можно сказать «шейпинг основан на законе подкрепления».
13. Безусловные и условные подкрепления и наказания
По книге
Из того, что оперантное обусловливание происходит на основе последствий поведения, следует, что всякий, кто хочет использовать его для изменения поведения, должен установить значимые последствия поведения и добиться контроля над ними. Таким образом, всегда встаёт вопрос: какие стимулы действуют в качестве подкреплений и наказаний?
Цитата из книги
«Нет никакой возможности надёжно предсказать, станут ли те или иные события подкреплениями или наказаниями; аверсивных стимулов… свойство таких стимулов заключается в том, как они изменяют поведение. События, которые увеличивают или уменьшают последующую частоту одной реакции, могут не оказывать никакого влияния на другие реакции…»Morse and Kelleher, 1977, с. 176–177, 180 — цитируется в 1-100.md, строки 4996–5091; курсив в источнике
Безусловное подкрепление (unconditioned reinforcer)
Стимул, способный повышать частоту того или иного непосредственно предшествующего ему поведения без предварительного сочетания с другими подкрепляющими стимулами. Безусловные подкрепления сформировались в результате эволюционного развития вида (филогенеза). Иногда называются первичными или врождёнными подкреплениями.
Безусловное наказание (unconditioned punisher)
Стимул, понижающий будущую частоту данного поведения без предварительного сочетания с какими-нибудь другими формами наказания. К таким стимулам в первую очередь относится боль (сигнал о повреждении организма), однако практически любой раздражитель, к которому восприимчивы сенсорные системы, — свет, звук, тепло — можно усилить до такой степени, что он, даже не вызывая повреждения тканей, будет подавлять поведение (Bijou and Baer, 1965).
По книге
В качестве безусловных подкреплений часто выступают пища и вода, необходимые для поддержания жизни организма, и удовлетворение полового влечения, способствующее выживанию вида. Слова «способные» и «часто» в этих формулировках вносят важный нюанс: эффективность безусловных подкреплений в каждый конкретный момент зависит от наличествующих мотивационных условий (motivating operations). Чтобы пища выступала подкреплением, необходимо, чтобы человек был голоден; у того, кто недавно поел и сейчас сыт, она вряд ли вызовет эффективное подкрепление. Подробнее о мотивационных условиях — в главе 16.
Способность определённых стимулов выступать в качестве безусловных подкреплений или наказаний является результатом эволюции вида (филогенеза). Ричард Мэлотт, Мэри Тиллема и Сигрид Гленн описывают естественный отбор «приятных» и «неприятных» стимулов так: определённые стимулы кажутся нам приятными или неприятными из-за того, как эволюционировал наш вид. Реакция на них врождённая — мы унаследовали биологический аппарат, который одни стимулы воспринимает как приятные, а другие как неприятные. Этот аппарат сформировался потому, что стимулы, кажущиеся сейчас приятными, помогали нашим предкам выживать, а кажущиеся неприятными — препятствовали выживанию (Malott, Tillema and Glenn, 1978, с. 9).
Несмотря на огромное значение безусловных подкреплений и наказаний для выживания организма, лишь немногие формы поведения в повседневной жизни человека напрямую зависят от них.
Мотивационные условия (операции) (motivating operation, MO)
Внешние переменные, способные: а) изменить (повысить или снизить) подкрепляющий или наказующий эффект стимула, объекта или события; б) изменить (повысить или снизить) частоту всех видов поведения, подкрепляемого или наказуемого данным стимулом.
Условное подкрепление (conditioned reinforcer)
Прежде нейтральный для организма (индифферентный) стимул, приобретший свойства подкрепления в результате предшествующего сочетания с одним или несколькими другими подкреплениями. Иногда называется вторичным или приобретённым подкреплением.
Условное наказание (conditioned punisher)
Прежде нейтральный для организма (индифферентный) стимул, приобретший свойства наказания в результате предшествующего сочетания с одним или несколькими другими наказующими стимулами. Иногда называется вторичным или приобретённым наказанием.
По книге
Стимулы, присутствующие или появляющиеся непосредственно перед подкреплением (или наказанием) или одновременно с ним, могут со временем приобретать свойство самостоятельно усиливать (или подавлять) данное поведение. Такие стимулы называются соответственно условными подкреплениями и наказаниями, поскольку они стали таковыми только благодаря сочетанию с другими подкреплениями и наказаниями.
Сочетание одних стимулов с другими для образования условных подкреплений и наказаний работает так же, как сочетание стимулов при респондентном обусловливании, с тем лишь отличием, что «результатом становится стимул, который не запускает конкретную реакцию, а действует как подкрепление [или наказание]» (Michael, 2004, с. 66; слова в квадратных скобках добавлены авторами книги).
По книге
Условные подкрепления и наказания никак не связаны ни с биологическими потребностями организма, ни с его анатомическими особенностями; их способность влиять на поведение — результат онтогенеза, то есть взаимодействия данного конкретного организма с внешней средой. Поскольку ни один человек не повторяет в точности жизнь другого, набор событий, которые в каждый конкретный момент при соответствующих мотивационных условиях могут выступать как подкрепления и наказания, для каждого уникален и постоянно меняется.
С другой стороны, люди, получившие сходный опыт (одноклассники, коллеги, соотечественники), скорее всего, будут реагировать на одни и те же стимулы сходным образом. В нашей культуре очень эффективными условными подкреплениями являются общественное внимание и похвала (или, напротив, порицание). Поскольку они обычно сочетаются со множеством других подкреплений (или наказаний), они оказывают мощное влияние на поведение человека.
Людей, объединённых одной культурой, сближает единое прошлое, поэтому при работе с конкретным клиентом есть все основания искать подкрепления и наказания среди тех стимулов, которые уже успешно себя зарекомендовали в работе с другими клиентами. Однако, стремясь донести суть оперантного обусловливания, авторы намеренно избегают перечислять стимулы, которые могут действовать как подкрепления и наказания.
Цитата из книги
«…любой стимул может стать подкреплением, если правильно подобрать характер изменения этого стимула, а также интервал между поведением и предъявлением этого стимула».Schoenfeld, 1995, с. 184 — цитируется в 1-100.md, строки 5071–5078
По книге
Позволим себе повторить эту принципиально важную мысль. Подкреплениями или наказаниями обозначают функциональные классы стимулов, принадлежность к которым не определяется их физической природой. Жизненный опыт человека, его мотивация и условия среды, сочетаясь друг с другом, приводят к тому, что «любой стимул может стать подкреплением, если правильно подобрать характер изменения этого стимула, а также интервал между поведением и предъявлением этого стимула» (Schoenfeld, 1995, с. 184). Расхожая фраза «всё относительно» как нельзя более уместна для понимания функциональных связей между поведением и средой.
От меня
Это ключ к практике. Не существует «универсальной конфеты», которая подкрепит любого ребёнка в любой момент. Подкрепление — не свойство предмета, а отношение между поведением, стимулом и текущей мотивацией. Один и тот же стимул может быть положительным подкреплением в одних условиях и отрицательным — в других. Поэтому специалист не спрашивает «что дети любят?», а проверяет, что именно повышает частоту конкретного поведения у конкретного человека сейчас.
От меня
Ещё одно различение, которое понадобится дальше: автоматизм подкрепления — это когда поведение меняется без осознания связи с последствием. Его нельзя путать с автоматическим подкреплением — термином для реакций, которые сами себе служат подкреплением (например, расчёсывание укуса насекомого). Первое — про отсутствие осознания, второе — про источник подкрепления. Книга специально предупреждает об этом в сноске 13.
14. Сверка с глоссарием
Каждый термин этого урока сверен с глоссарием книги (701-800.md, строки 5371–6970). Где формулировки расходятся, приведены обе; это не ошибка урока, а разница жанров: глава объясняет, глоссарий определяет.
| Термин | В главе | В глоссарии |
|---|---|---|
| Оперантное поведение | Поведение, частота которого определяется в первую очередь последствиями; отбирается, формируется и поддерживается событиями, которые за ним следуют. | «Поведение, формирование, поддержание и стимульный контроль которого определяются последствиями. Репертуар оперантного поведения каждой особи или личности является результатом взаимодействий с окружающей средой (онтогенеза)» (строки 6099–6104). |
| Оперантное обусловливание | Избирательное влияние последствий поведения на само поведение. | «Способ формирования оперантного поведения. Суть этого способа заключается в том, что последствия поведения (изменения стимула сразу после поведенческой реакции) приводят в будущем к усилению (в случае подкрепления) или ослаблению (в случае наказания) поведенческих реакций того же класса при тех же внешних условиях и мотивационном фоне» (строки 6088–6098). |
| Подкрепление | 1) изменение стимула сразу после реакции, повышающее будущую частоту; 2) стимул, повышающий частоту. | Те же два значения (строки 6264–6275). |
| Положительное подкрепление | Предъявление стимула сразу после реакции, повышающее будущую частоту. | «Предъявление стимула сразу после некоей поведенческой реакции, приводящее к увеличению будущей частоты реакций такого класса в сходных условиях» (строки 6310–6313). |
| Отрицательное подкрепление | Увеличение частоты поведения вследствие исчезновения или ослабления стимула. | Два значения: 1) устранение стимула сразу после реакции, повышающее будущую частоту; 2) стимул, устранение которого играет роль подкрепления (строки 6078–6084). |
| Наказание | Последствие, понижающее будущую частоту поведения. | «Процесс, при котором поведение сопровождается стимулом, понижающим будущую частоту этого поведения» (строки 5988–5998). |
| Положительное наказание | Предъявление стимула, понижающее будущую частоту. | То же; добавлено «иногда называется наказанием типа I» (строки 6303–6308). |
| Отрицательное наказание | Устранение или снижение интенсивности стимула, понижающее будущую частоту. | То же (строки 6133–6136). |
| Аверсивный стимул | Стимул, удаление которого подкрепляет поведение; может выступать наказанием. | Три функции: вызывает поведение, удалявшее его; выступает наказанием; выступает отрицательным подкреплением (строки 5372–5379). |
| Безусловное подкрепление | Стимул, повышающий частоту без предварительного сочетания с другими подкреплениями. | То же; сформировался в филогенезе, иногда называется первичным или врождённым (строки 5438–5447). |
| Безусловное наказание | Стимул, понижающий частоту без предварительного сочетания с другими формами наказания. | Статья повреждена: «без предварительного сочетания с другими подкрепляющими стимулами» (строки 5414–5428) — по смыслу должно быть «наказующими». См. предупреждение ниже. |
| Условное подкрепление | Прежде нейтральный стимул, приобретший свойства подкрепления через сочетание с другими подкреплениями. | То же; иногда называется вторичным или приобретённым (строки 6809–6815). |
| Условное наказание | Прежде нейтральный стимул, приобретший свойства наказания через сочетание с наказующими стимулами. | То же (строки 6791–6798). |
| Мотивационные условия | Внешние переменные, меняющие подкрепляющий/наказующий эффект стимула и частоту поведения. | То же, с указанием на влияние на значимость подкрепления и на частоту поведения (строки 5963–5972). |
| Автоматизм подкрепления | Поведение меняется в зависимости от последствий, осознаёт это человек или нет. | То же; специально оговорено: не путать с автоматическим подкреплением (строки 5385–5392). |
Повреждённый фрагмент источника, требуется проверка
Статья «Безусловное наказание» в глоссарии (строки 5414–5428) содержит, по-видимому, ошибку распознавания: «без предварительного сочетания с другими подкрепляющими стимулами». В главе 2 (строки 4885–4899) сказано: «без предварительного сочетания с какими-нибудь другими формами наказания». Цитировать глоссарий дословно в этом месте нельзя без сверки с бумажной книгой.
Кроме того, в главе (строки 4744–4759) феномен — угасание, а метод его выработки — гашение; в глоссарии «Гашение» определяется как процедура формирования угасания (строки 5503–5505), а «Угасание» — как ослабление реакции (строки 6729–6732). Это согласуется, но требует внимательного чтения: в разных местах книги акцент разный.
Фрагменты таблицы 2.3 и врезки 2.1 в исходном файле частично переплетены с соседними колонками (строки 4191–4254, 4480–4578). Содержание передано по смыслу; дословные границы отдельных строк требуют сверки.
Длинная цитата Морза и Келлехера (строки 4996–5091) в источнике разорвана вставками второй колонки и курсивными пометками. В уроке она приведена как реконструкция: начало и конец читаются однозначно, но несколько слов в середине требуют сверки с бумажной книгой.
15. С чем легко перепутать
| Понятие A | Понятие B | В чём разница |
|---|---|---|
| Оперантное поведение | Респондентное поведение | Оперантное отбирается последствиями; респондентное вызывается антецедентным стимулом. Оперант описывается трёхчленной последовательностью, респондент — рефлексом «стимул — реакция». |
| Подкрепление | Наказание | Подкрепление повышает будущую частоту, наказание понижает. Определяется результатом, а не намерением или неприятностью стимула. |
| Положительное | Отрицательное | Положительное — стимул добавили или усилили; отрицательное — убрали или ослабили. Это не оценка «хорошо/плохо». |
| Отрицательное подкрепление | Наказание | Отрицательное подкрепление повышает частоту поведения, убирая стимул. Наказание понижает частоту. Синонимами они не являются. |
| Отрицательное подкрепление | Отрицательное наказание | Оба убирают стимул. Но первое повышает частоту поведения, второе понижает. |
| Положительное наказание | Отрицательное наказание | Первое добавляет стимул (например, выговор), второе убирает (например, лишает жетонов). Оба понижают частоту. |
| Подкрепление | Подкрепитель (стимул) | Подкрепление — процесс или изменение, повышающее частоту. Подкрепитель — стимул, который это делает. В книге слово «подкрепление» используется и в обоих смыслах. |
| Автоматизм подкрепления | Автоматическое подкрепление | Автоматизм — поведение меняется без осознания связи. Автоматическое подкрепление — реакции, которые сами себе служат подкреплением (расчёсывание укуса). |
| Закон поведения | Методика изменения поведения | Закон — общая функциональная зависимость (подкрепление, наказание, угасание). Методика — конкретный способ применения закона (похвала, жетоны, шейпинг). |
| Безусловное подкрепление | Условное подкрепление | Безусловное действует без предварительного обучения, сформировано филогенезом. Условное приобрело свойства через сочетание с другими подкреплениями, сформировано онтогенезом. |
| Отдалённое последствие | Незамедлительное последствие | Непосредственно на поведение влияют последствия в первые секунды. Отдалённые действуют через правила, обещания и другие речевые стимулы, а не напрямую. |
| Класс реакций | Отдельная реакция | Подкрепляется класс действий с одинаковым эффектом на среду, а не одно конкретное движение. Поэтому поведение сохраняется при изменении формы. |
16. Самопроверка
Дайте определение оперантного поведения и объясните, почему его называют «свободным».
Оперантное поведение — поведение, частота которого определяется в первую очередь его последствиями; оно отбирается, формируется и поддерживается событиями, которые за ним следуют. «Свободным» его называют потому, что оно очень пластично, не привязано к жёсткому набору врождённых реакций и может меняться в зависимости от результатов. Именно эта пластичность позволяет организму приспосабливаться к меняющейся среде.
Назовите не менее пяти различий между респондентным и оперантным поведением по таблице 2.3.
1) Определение: вызывается антецедентами — отбирается последствиями. 2) Единица: рефлекс «стимул — реакция» — класс реакций и трёхчленная последовательность. 3) Эффекторы: гладкие мышцы и железы — в основном поперечнополосатые мышцы. 4) Обусловливание: павловское сочетание стимулов — изменение стимула после реакции. 5) Границы репертуара: определены филогенезом — приобретаются в онтогенезе. Можно добавить примеры, пользу для организма и вида.
Как принцип отбора по последствиям связан с дарвиновским естественным отбором? Что такое онтогенез и филогенез?
Отбор по последствиям — параллель естественному отбору: формы поведения, дающие благоприятные последствия, закрепляются, остальные исчезают. Естественный отбор действует на протяжении филогенеза — эволюционной истории вида. Отбор оперантного поведения действует на протяжении онтогенеза — индивидуальной истории взаимодействий организма со средой. Пример с жирафами иллюстрирует филогенез; пример с младенцем и игрушкой — онтогенез.
Почему говорят, что последствия влияют только на будущее поведение? Как это согласуется с фразой «поведение определяется последствиями»?
К моменту, когда последствие наступило, поведение уже закончилось, поэтому оно не может изменить прошлое. Последствие меняет вероятность или частоту подобного поведения в будущем при сходных условиях. Фраза «поведение определяется последствиями» означает именно это: последствия отбирают поведение для будущего, а не задним числом управляют уже совершённым действием.
Что подкрепляется при оперантном обусловливании — отдельная реакция или класс реакций? Приведите пример из книги.
Подкрепляется класс реакций — группа внешне разных действий, производящих одинаковый эффект на среду. Пример: если бы движение и звон подвесной игрушки подкрепляли только движения одной руки, ребёнок не смог бы достать игрушку после того, как её перевесили. Но поскольку подкрепляется класс «ударить по игрушке», он может сделать это другой рукой или ногой.
Почему незамедлительность последствия важнее его величины? Как действуют отдалённые последствия?
Поведение наиболее восприимчиво к последствиям, наступающим в первые несколько секунд. События, отсроченные более чем на несколько секунд, не влияют напрямую на будущую частоту. Отдалённые последствия действуют через сложные речевые и общественные стимулы — правила, обещания, инструкции, — а не сами по себе. Поэтому «зарплата в конце месяца» влияет на поведение не напрямую, а через правила и социальные сигналы.
Объясните на примере суеверного ритуала игрока в покер, почему подкрепление называют «беспристрастным».
Подкрепление действует на любое поведение, которое хронологически непосредственно предшествовало ему, независимо от того, логично ли это поведение и полезно ли оно. Игрок похлопал по картам, и ему выпала удачная карта — поведение случайно оказалось перед подкреплением и стало повторяться. Между поведением и последствием действует только временная связь; «почему» последствие наступило, для отбора не важно.
Заполните матрицу: что такое положительное и отрицательное подкрепление, положительное и отрицательное наказание? Почему отрицательное подкрепление — не синоним наказания?
Положительное подкрепление — стимул добавили, частота выросла. Отрицательное подкрепление — стимул убрали, частота выросла. Положительное наказание — стимул добавили, частота упала. Отрицательное наказание — стимул убрали, частота упала. Во всех случаях решает результат: изменилась ли будущая частота поведения.
Отрицательное подкрепление повышает частоту поведения, потому что убирает или ослабляет аверсивный стимул. Наказание понижает частоту. Пример: ребёнок бьёт по игрушке, чтобы прекратить мелодию; если удары учащаются, это отрицательное подкрепление, а не наказание. Другой пример: школьник, выгнанный с урока, избегает неприятных занятий, и его хулиганское поведение учащается — это тоже отрицательное подкрепление.
Чем закон поведения отличается от методики изменения поведения? Приведите по два примера.
Закон — общая функциональная зависимость, подтверждённая множеством экспериментов: закон подкрепления, закон наказания, закон угасания. Методика — конкретный способ применения закона: похвала и жетоны основаны на законе подкрепления; отстранение от подкрепления и штрафование — на законе наказания. Законов несколько, методик много.
Почему нельзя заранее сказать, будет ли стимул подкреплением? Что такое мотивационные условия?
Подкрепление и наказание — функциональные классы стимулов, определяемые по их влиянию на поведение, а не по физической природе. Один и тот же стимул в разных условиях может усиливать или подавлять поведение. Мотивационные условия — внешние переменные, которые меняют подкрепляющую или наказующую эффективность стимула и частоту соответствующего поведения. Пример: пища подкрепляет, только если человек голоден.
1-100.md (с. 34–44).
Не вошли в урок: полный текст врезки 2.1 (строки 4480–4578) — диалог пересказан, но не приведён целиком; полный перечень примеров таблицы 2.3 приведён; сноски 10–20 переданы по смыслу, кроме сносок 13 (автоматизм vs автоматическое подкрепление) и 19 (три значения аверсивного стимула), которые разобраны отдельно. Обсуждение стимульного контроля и трёхчленной последовательности начинается со строки 5090 и вынесено в урок 2.3.