Если вы обучили крысу нажимать на рычаг для получения пищевого подкрепления, а затем отключили аппарат подачи пищи, крыса сначала очень часто нажимает на рычаг, затем все реже и реже, пока, наконец, не прекратит это совсем, Поведение "угасло".

Термин "угашение" идет из психологических лабораторий. Он предполагает исчезновение не животного, а поведения, которое пропадает само собой вследствие отсутствия подкрепления, подобно сгорающей свечке.

Поведение, которое не приводит ни к каким результатам - ни к хорошим, ни к плохим, а именно ни к каким, - скорее всего затухнет. Но не всегда это означает, что вы можете игнорировать поведение и оно исчезнет. Поведение пренебрегающего его результатами человеческого существа есть уже само по себе результат существа, совершающего столь асоциальное действие, поэтому не всегда можно рассчитывать на угашение поведения другого человека и даже животного, не обращая на него внимание. К тому же крыса, нажимающая на рычаг, делает это в лабораторных условиях; внешние стимулы здесь сведены до минимума. А поведение человеческих существ не осуществляется в вакууме.

Отрицательным подкреплением является любое неприятное событие или стимул, пусть даже весьма слабый, действие которого можно прекратить или избежать, изменив поведение. Когда на поле с электрическим ограждением корова касается ограды носом, то получает удар электрического тока, но как только она отпрянет назад, действие тока прекращается. Они научается избегать ударов тока с помощью того, что не подходит к ограде. Избегание загородки было подкреплено, но подкрепление было не положительным, а отрицательным.

Жизнь изобилует отрицательными подкреплениями. Мы изменяем положение тела, когда становится неудобно сидеть на стуле. Мы стремимся скорее войти в дом, когда идет дождь. Некоторые люди считают, что запах чеснока возбуждает аппетит, другие же находят его отвратительным. Стимул становится отрицательным подкреплением только в том случае, если он воспринимается субъектом как неприятный и если изменение поведения направлено на уменьшение неприятных ощущений.

Чувство вины и стыд являются формами самонаказания. Трудно найти другое столь же неприятное чувство, как холодная рука чувства вины, сжимающая ваше сердце; этот тип наказания является чисто человеческим изобретением. Некоторые животные, в первую очередь, конечно, собаки, могут проявлять смущение или стыд (например, если случайно напачкают в доме). Но, я думаю, нет таких, которые тратят время на переживание чувства вины за прошлые действия.

Степень вины, которую мы относим к себе, варьирует в широких пределах. Один. человек чувствует релаксацию и удовлетворение, совершив преступление, а другой чувствует вину, держа во рту жевательную резинку. Множество людей не испытывают чувства вины и стыда в своей каждодневной жизни, и не из-за своего совершенства и не из-за своей полной бесчувственности, но потому, что они реагируют на собственное поведение по-разному. Если в прошлом они совершали что-либо, что доставило им неприятности, они не повторят это вновь. Другие повторяют одну и ту же ошибку снова и снова - ведут себя глупейшим образом в обществе, говорят гадости тем, кого любят, - несмотря на то, что на следующий день всегда испытывают чувство невероятного стыда. В качестве метода изменения поведения стыд стоит в одном ряду с поркой и любым другим видом наказания - он не очень эффективен, так как приходит слишком поздно.

Это излюбленный метод всех. Если поведение неправильное, мы прежде всего думаем о наказании. Ругаем ребенка, шлепаем собаку, урезываем зарплату, налагаем штраф на компанию, преследуем инакомыслящих, вторгаемся в страну и т.д.

Но наказание - довольно грубый способ изменения доведения. Фактически в большинстве случаев наказание не помогает вовсе.

Прежде чем рассмотреть, что можно и чего нельзя достичь наказанием, отметим, что происходит, когда оно применено и не возымело действия. Допустим, мы наказали ребенка, собаку или служащего за какое-либо поведение, а это поведение возникает снова. Разве мы говорим "Хм, наказание не подействовало, не попробовать ли что-нибудь другое?" Нет. Мы усиливаем наказание. Если выговор не помогает, пробуем шлепок. Если ваш ребенок принес дневник с плохими отметками, у него отбирается велосипед. А если в следующий раз дневник снова плохой, у него отбирается и льдянка. Ваши служащие не проявляют должной расторопности. Пригрозите им. Не помогает? Урежьте их зарплату.

По-прежнему никакого результата? Прекратите выплату жалования, оштрафуйте, отдайте под суд! Плетка не изменяет поведения еретика? Можно попробовать испанский сапог или дыбу.

Это действует безотказно. С данным субъектом у вас наверняка больше не возникнет этой поведенческой проблемы. Фактически это широко распространенный и всеми признаваемый метод борьбы с собаками, загрызающими овец.

Метод 1 является высшей мерой наказания. Каковы бы ни были моральные или другие подтексты (аспекты) высшей меры наказания, но если казнить убийцу, он больше не совершит преступления. Методом 1 избавляются от поведения, временно или навсегда избавляясь от того, кто его совершает.

Увольнение служащего, развод с супругом, переселение в другую комнату от неряшливого соседа - все это метод 1.

С другими людьми могут возникнуть новые проблемы, но того субъекта, чьим поведением вы сыты по горло, больше нет, и с ним исчезло данное поведение.

Метод 1 довольно жесток, но иногда вполне адекватен, когда проступок слишком велик для того, чтобы иметь продолжение и не представляется возможности для его легкого изменения. Допустим, например, что кто-то из ваших родителей, супруг (или ребенок) бьют вас. Некоторые находят из этого выход в реальном уничтожении того человека, и в крайних случаях самозащита может быть оправдана. Уход из дома - тоже разрешение проблемы методом 1, но более гуманное.

Метод 1. "Убить зверя". Это безусловно подействует. Вам никогда больше не придется снова иметь дело с данным поведением у данного субъекта.

Метод 2. Наказание. (Предпочитаемо всеми, хотя оно почти никогда не приносит действительной пользы.)

Метод 3. Отрицательное подкрепление.

Метод 4. Угашение: поведению предоставляется возможность исчезнуть самому по себе.

Метод 5. Выработка несовместимого поведения. (Этот метод имеет особую значимость для спортсменов и владельцев домашних животных.)

Метод 6. Добиться, чтобы данное поведение совершалось по сигналу. (В последующем вы перестанете давать этот сигнал. Это наиболее изощренный метод, применяемый тренерами дельфинов для того, чтобы избавиться от нежелательного поведения.)

Метод 7. "Формирование отсутствия": подкрепляется все что угодно, кроме нежелательного поведения. (Вежливый способ превратить неприятных родственников в приятных.)

Итак, вы знаете о том, как сформировать новое поведение, а как вам избавиться от нежелательного поведения, которое уже имеется?

Люди и животные всегда совершают то, что с нашей точки зрения лучше бы они не делали. Дети устраивают потасовку и кричат в машине. Собака лает всю ночь. Кошки дерут когтями мебель. Ваш сосед по комнате всюду разбрасывает грязные вещи. От кого-нибудь из родственников слышишь постоянные придирки с требованием телефонных звонков. Все это - нежелательные виды поведения.

Существует восемь способов избавиться от нежелательного вида поведения. Всего восемь. И не важно, является ли это поведение укоренившимся, как в случае неряшливого соседа по комнате, или внезапным, как в случае детей, бесчинствующих в машине. Все, что вы можете предпринять по этим поводам, будет вариацией на тему одного из восьми методов.

(Я не касаюсь здесь сложных сочетаний поведенческих проблем, которые возникают у человека с психическими нарушениями или у непредсказуемо свирепой собаки; я рассматриваю только отдельные проявления нежелательного поведения.)

Никому не нужно постоянно управлять или быть управляемым с помощью условных стимулов или выученных сигналов, живые существа - это не машины. В действительности реакция на выученный сигнал представляет собой усилие, причем такое усилие, которое не только не должно, но и не может поддерживаться постоянно.

Большую часть времени у начальника нет надобности держать подчиненных рядом. Если дети бездельничают, а вы не очень спешите, то вы можете сами расслабиться. Служащим, которые и так уже работают с полной отдачей, не нужны приказы и инструкции. Ни нас самих, ни других людей не должны опутывать ненужные правила и регламентации: они вызывают только сопротивление.

Совершенно очевидно, что управление с помощью стимулов используется, чтобы дети стали воспитанными, домашние животные слушались, персонал был надежным и т.д.

Установление контроля над поведением с помощью стимулов часто порождает интересный феномен, который один из тренеров назвал "провалом преднаучения". Вы сформировали поведение и теперь пытаетесь сделать его управляемым с помощью стимулов. Но когда вам кажется, что субъект уже проявляет способность отвечать на стимулы, он внезапно перестает отвечать не только на стимулы, но и вообще давать нужные реакции. Он ведет себя так, будто никогда и не слышал о действиях, которые вы сформировали.

Этот момент полностью обескураживает тренера. Вот вы очень изобретательно научили цыпленка танцевать, а теперь хотите, чтобы он танцевал только, когда вы поднимаете правую руку. Цыпленок смотрит на вашу руку, но не танцует.

Или же он может стоять на месте, когда вы подаете сигналы, и начинать интенсивно отплясывать, когда никакого сигнала не было.

Если вы построите график этой последовательности, то увидите постоянно идущую кверху линию, отражающую увеличение процента правильных ответов (т.е. ответов на сигналы), которая затем резко снижается, ибо соответственно правильность ответов падет до нуля (когда вы имеете букет отсутствия ответов и неправильных ответов). Однако если вы продолжаете упорно работать, затем внезапно наступает озарение: вдруг, совершенно случайно, субъект скачком начинает отвечать на команды действительно идеально - вы поднимаете руку, цыпленок танцует. Поведение управляется стимулами.

С большинством животных приходится сначала немного повозиться, чтобы установить управление их поведением с помощью стимулов, но часто к тому времени, как берете под контроль сигналов третий или четвертый тип поведения, оказывается, что животное как бы обобщает, у него появляется нечто вроде понимания идеи. Выучив три-четыре условных поведенческих акта, большинство субъектов, по-видимому, начинают распознавать определенные события в качестве сигналов, каждый из которых означает свой тип поведения, и что получение подкрепления зависит от правильного распознавания и ответа на сигналы. С этого момента введение условных сигналов становится простым. У субъекта уже имеется общая картина, и все что ему надлежит сделать - это научиться классифицировать новые сигналы и ассоциировать их с правильным поведением. Если вы, как дрессировщик, поможете питомцу, сделав это понятным, последующее обучение может идти само собой много быстрее, чем трудные начальные шаги.

У людей обобщение происходит еще быстрее. Если вы вознаградили за ответ только на одну выученную команду, люди очень скоро начинают давать ответы и на другие команды, чтобы заслужить подкрепление. Мой друг Ли, учитель математики шестого класса школы в одном из непривилегированных районов Нью-Йорка, каждый учебный год начинает с того, что обучает школьников выбрасывать жевательную резинку, как только он попросит их об этом. Никакого принуждения. Просто: "Все, внимание, жевательную резинку изо рта. Хорошо! Стоп! Подождем, у Дорин она еще есть... великолепно! Она ее вынула. Молодец, Дорин!".

Один мой нью-йоркский знакомый каждый выходной ходил со своим золотистым спаниелем в Центральный парк, чтобы играть в "пчелку". Он рассказывает мне, что сплошь и рядом встречает людей, безуспешно пытающихся обучить своих собак этой игре. Это досадно, потому что игра в "пчелку" прекрасный способ тренировки собаки в городе. По сравнению с простым мячом "пчелка" летит медленнее и по неопределенной траектории, возможно, больше напоминает реальную дичь, заставляет собаку совершать прыжки в попытках поймать ее, что доставляет удовольствие и хозяину. И, наконец, игра в "пчелку" позволяет хозяину, оставаясь на одном месте, заставлять собаку бегать.

Люди жалуются, что, когда они бросают "пчелку", собака наблюдает за ее полетом, продолжая оставаться на месте, хотя если ее раззадорить, то она будет прыгать, пытаясь схватить "пчелку", когда та пролетает мимо. В этой игре два дрессировочных момента: первый состоит в том, чтобы обучить собаку, на какое расстояние она должна отбегать за "пчелкой". Второй состоит в том, что данная игра - цепное поведение: сначала собака гонится за "пчелкой", затем ловит "пчелку", наконец, несет ее назад хозяину, чтобы он снова кинул ее. Поэтому каждому элементу этого сложного поведения следует обучать отдельно, и последнее действие в цепи, принос, должно быть выработано первым.

Как только стимул становится условным сигналом, происходит интересная вещь: он превращается в подкрепление. Вспомните звонок на перемену в школе. Звонок на перемену является сигналом, условным сигналом, означающим: "Вы свободны, идите и играйте". А кроме того, он воспринимается как подкрепление - дети рады, когда слышат его, и если бы они смогли сделать что-либо, чтоб заставить его прозвенеть скорее, они бы это сделали. Теперь представьте себе звонок на перемену, который не звонит, если в классе нет тишины. Ко времени перемены у вас будет очень тихий класс.

Условный стимул - предвестник подкрепления, и поэтому он становится желаемым событием. Желаемое событие - это само по себе уже подкрепление, а потому вы с успехом можете подкреплять поведение, давая условный стимул другого поведения. Например, я вознаграждаю кошку лакомством, когда она подходит ко мне по команде - она этому научается и выполняет это. Теперь, если я буду говорить: "Ко мне" и вознаграждать ее за реакцию всякий раз как увижу ее - на камине, то скоро окажется, что кошка, стремясь получить лакомство, будет забираться на камин. Как вы помните, с точки зрения кошки, она обучает меня давать ей лакомство. Для этого она нашла способ заставлять меня произносить: "Ко мне". Теперь допустим, что я обучаю ее вспрыгивать на камин, когда я жестом показываю на него, подкрепляя правильные ответы либо пищей, либо командой "Ко мне". Затем я буду жестом указывать на камин всякий раз, когда: а) я знаю, что кошка голодна и б) когда она случайно перевернется через спину...