Стимулы в качестве подкрепления: поведенческие цепи

Наука » Психология » Мнемотехника
Как только стимул становится условным сигналом, происходит интересная вещь: он превращается в подкрепление. Вспомните звонок на перемену в школе. Звонок на перемену является сигналом, условным сигналом, означающим: "Вы свободны, идите и играйте". А кроме того, он воспринимается как подкрепление - дети рады, когда слышат его, и если бы они смогли сделать что-либо, чтоб заставить его прозвенеть скорее, они бы это сделали. Теперь представьте себе звонок на перемену, который не звонит, если в классе нет тишины. Ко времени перемены у вас будет очень тихий класс.

Условный стимул - предвестник подкрепления, и поэтому он становится желаемым событием. Желаемое событие - это само по себе уже подкрепление, а потому вы с успехом можете подкреплять поведение, давая условный стимул другого поведения. Например, я вознаграждаю кошку лакомством, когда она подходит ко мне по команде - она этому научается и выполняет это. Теперь, если я буду говорить: "Ко мне" и вознаграждать ее за реакцию всякий раз как увижу ее - на камине, то скоро окажется, что кошка, стремясь получить лакомство, будет забираться на камин. Как вы помните, с точки зрения кошки, она обучает меня давать ей лакомство. Для этого она нашла способ заставлять меня произносить: "Ко мне". Теперь допустим, что я обучаю ее вспрыгивать на камин, когда я жестом показываю на него, подкрепляя правильные ответы либо пищей, либо командой "Ко мне". Затем я буду жестом указывать на камин всякий раз, когда: а) я знаю, что кошка голодна и б) когда она случайно перевернется через спину...

Предвосхищение

Наука » Психология » Мнемотехника
Наиболее частым недостатком в управляемом сигналами поведении является предвосхищение: как только сигнал усвоен, субъект так стремится продемонстрировать требуемое поведение, что совершает его раньше, чем подается сигнал.

Термин, описывающий это проявление, заимствован из опережающего поведения у людей при состязаниях в беге - опережая выстрел, фальстарт, ложная тревога. Люди, которые опережают указания и просьбы других, обычно считаются нетерпеливыми, выскочками или подобострастными; это очень раздражающая привычка, а вовсе не добродетель.

На соревнованиях по выучке с доберман-пинчерами часто бывают неприятности. Хотя эти собаки прекрасно поддаются дрессировке, они столь возбудимы, что предвосхищают команды по малейшим намекам и начинают работать прежде, чем им в действительности приказывают, теряя при этом баллы. Предвосхищение является обычной ошибкой лошадей, с которых бросают лассо на родео. Предполагается, что ковбой и лошадь должны ждать за барьером, пока не пустят бычка, но возбужденная лошадь перескакивает барьер раньше сигнала.

Ковбой иногда думает, что у него лошадь с высокими ходовыми качествами, но на самом деле это просто недостаточно выработанное управление с помощью сигналов.

Время отставления

Наука » Психология » Мнемотехника
Чтобы добиться точности ответа на условный стимул, полезно применять прием ограничения времени отставления.

Допустим, ваш подопечный обучился совершать какое-либо действие в ответ на условный сигнал, но обычно имеется некоторый интервал времени между предъявлением стимула и ответом субъекта. Вы пригласили людей на ужин, и они немного запоздали, или ваш слон после сигнала к остановке постепенно замедляет ход и наконец останавливается.

Если вы хотите, то, используя ограничение времени отставания, можете в процессе тренировки так сократить этот интервал, что поведение будет возникать так быстро, как это только физически возможно.

Вы начинаете с того, что устанавливаете нормативный интервал, с которым обычно наблюдается поведение; затем вы подкрепляете только то поведение, которое совершается в течение этого интервала. Поскольку живые существа характеризуются вариабельностью, некоторые ответы будут выходить за пределы интервала и за них не будет даваться подкрепление. Например, если вы подаете ужин точно в назначенное в приглашении время, а не ждете опоздавших, то они рискуют получить все холодное или застать меньший выбор.

Условные стимулы, вызывающие отвращение

Наука » Психология » Мнемотехника
Единственным случаем, где сила условного стимула, по-видимому, имеет значение, является обычно дрессировка домашних животных - рывок за поводья или привязь, легкий удар по бокам лошади - все это размытый вариант первоначального безусловного стимула, резкого рывка или толчка, сильного удара рукой, которые вызывают ответ, не требующий обучения. Поэтому, если слабый стимул не действует, создается впечатление, что ответ возрастает, если вы усилите стимул. Однако попытки осуществить это на практике встречают большие затруднения.

Выученные сигналы и первоначальные стимулы совершенно различны по своей природе, а новички обычно это не учитывают. Если они не получают ответа, скажем, на легкий рывок, они дергают чуть сильнее, затем еще немного сильнее, и все совершенно без пользы, так как лошадь или собака с той же возрастающей силой тянут в другую сторону.

Интенсивность сигнала и стирание стимулов

Наука » Психология » Мнемотехника
Не существует определенных требований к интенсивности и величине условного сигнала, вызывающего ответ. Первичные, или безусловные, стимулы, дают градуальный ответ в зависимости от интенсивности: реакция на резкий, колющий удар сильнее, чем на булавочный укол, и чем громче внезапный шум, тем сильнее мы вздрогнем. Однако условному стимулу достаточно быть узнаному, чтобы вызвать полный ответ. Вы видите красный свет и останавливаете машину; быстрее или медленнее вы это делаете не зависит от размера светофора. До тех пор, пока вы распознаете сигнал, вы знаете, что делать. Поэтому, как только стимул заучен, возможно не только получить его перенос, но также постепенно его уменьшать, пока он не станет едва различим, но по-прежнему будет давать те же результаты. Возможен случай, когда вы можете получать результаты при таких слабых сигналах, которые не видны постороннему глазу. Это называется "стирание" стимулов.

Мы пользуемся стиранием постоянно: то, что поначалу должно быть очень массированным стимулом ("Дик, нельзя сыпать песок на головы другим детям", - говорим мы, вытаскивая Дика из песочниц), со временем превращается в чуть заметный сигнал (просто поднять брови иди погрозить пальцем). Дрессировщики животных иногда добиваются поразительных, просто волшебных результатов с помощью стертых стимулов. Один из самых забавных номеров, которые я видела, проделывал попугай в Парке диких животных в Сан-Диего. Он разражался истерическим хохотом в ответ на чуть заметное движение руки дрессировщика. Представьте себе возможности этого трюка: "Педро, что ты думаешь о шляпе этого человека?" - "Ха-ха-ха!". Поскольку публика не замечает сигнал, единственное выученное попугаем поведение кажется результатом разумного сардонически-язвительного ответа на вопрос; а на самом деле это был четкий ответ на очень ослабленный стимул, а сардонический ум, если и присутствовал, то принадлежал дрессировщику, а может быть, сценаристу.

Что может быть сигналом?

Наука » Психология » Мнемотехника
Условным стимулом - выученным сигналом может быть все, абсолютно все, что может быть воспринято. Флаги, свет, слова, прикосновения, вибрация, хлопки пробок шампанского - короче говоря, безразлично, какой сигнал вы используете.

Коль скоро субъект может воспринимать его, сигнал может быть использован для вызова выученного поведения.

Дельфинов обычно тренируют с помощью воспринимаемых зрением сигналов, руки, но я знаю одного слепого дельфина, который выучил много разных типов поведения в ответ на различные прикосновения. Пастушьих собак обычно дрессируют с помощью сигналов, поданных рукой и голосом. Однако в Новой Зеландии с ее широкими просторами, где собака может находиться очень далеко, в качестве условного сигнала используют пронзительные свистки, которые слышны на большем расстоянии, чем голос. Когда новозеландский пастух продает такую собаку, покупателем может оказаться человек, живущий за много миль; так как свистки невозможно записать на бумаге, то старый хозяин обучает нового командам по телефону.

У рыб можно выработать условный рефлекс на звуки или свет - мы все знаем, как аквариумные рыбки устремляются к поверхности, если постучать по стеклу или включить свет. А человеческие существа могут выработать условные связи практически на все что угодно.

Правила управления с помощью стимулов

Наука » Психология » Мнемотехника
Для того чтобы управлять с помощью сигналов, надо сформировать нужное поведение, а затем, когда оно осуществляется, делать так, чтобы оно происходило во время или сразу после какого-либо определенного сигнала. Этот стимул затем становится ключом, или сигналом, поведения.

Например, предположим, что вы заставляете собаку садиться, надавливая на крестец и подтягивая за ошейник. Это безусловные стимулы, они действуют без обучения. Затем вы подкрепляете любое самостоятельное проявление собакой этой позы, формируя соответствующее поведение. Делая это, вы произносите команду "Сидеть!", которая первоначально ничего не значит для собаки (конечно, подойдет и любое другое слово на любом языке). Когда собака усвоит, что вам иногда надо, чтобы она села, она иногда станет выполнять это действие во время или после предъявления сигнала, или условного стимула, команды "Сидеть!". В конце концов она начнет выполнять действие точно в соответствии с тем, что ей приказывают.

Теперь поведение находится под контролем стимула, не так ли? Еще нет. Проделана только половина работы. Животное следует также обучить - и это специальная тренировочная задача - не садиться без команды. Установление управления поведением стимулами не является завершенным, пока оно совершается и в отсутствии условного сигнала.

Взаимодействие без принуждения

Наука » Психология » Мнемотехника
Все, что вызывает какую-либо поведенческую реакцию, называется стимулом. Некоторые стимулы способны вызывать реакции без какого-либо обучения или тренировки: мы вздрагиваем от громкого звука, моргаем от яркого света, нас тянет в кухню, когда до нас доносится аппетитный запах; животные поступают точно так же. Такие звуки, свет и запахи называются безусловными, или первичными, стимулами.

Другие стимулы заучиваются благодаря ассоциации. Сами по себе они могут ничего не значить, но становятся выделяемыми сигналами для поведения; сигналы светофора заставляют нас стоять или идти, мы вскакиваем, чтобы снять трубку зазвонившего телефона, на шумной улице оборачиваемся, услышав свое имя и т.д., и т.д. Ежедневно мы отвечаем на множество выученных сигналов. Они называются условными, или вторичными, стимулами.

При формальном тренинге львиная доля усилий приходится на образование условных сигналов. Сержант, занимающийся строевой подготовкой со взводом новобранцев, и хозяин собаки на дрессировочной площадке в равной мере стремятся сделать в основном так, чтобы обучающиеся повиновались командам, которые в действительности являются условными сигналами. Фокус не в том, что собака может сидеть, а человек останавливаться, фокус в том, что это делается четко и по команде. Вот что мы называем повиновением - не просто выполнение действия, но гарантия того, что оно будет выполнено по сигналу. Психологи называют это "поставить поведение под контроль стимулов". Это вырабатывается с трудом, выработка основывается на правилах, а правила нуждаются в проверке.

Выработка поведения без помощи слов

Наука » Психология » Мнемотехника
В обычных ситуациях обучения, таких, как уроки тенниса, субъект знает, что ее или его обучают, и обычно охотно включается в этот процесс. Поэтому вам не обязательно дожидаться нужной реакции и подкреплять ее. Вы можете без особого вреда словами направлять поведение: "Делай так. Хорошо. Теперь повтори дважды. Хорошо". Однако в нестандартных ситуациях лучше обойтись без инструкций и (словесных) обсуждений. Предположим, ваш сосед по комнате - неряха, который повсюду разбрасывает грязную одежду, а словесные внушения - выговоры, просьбы - все остается без результатов. Можно ли выработать аккуратность?

Возможно.

Конечно, вы должны наметить план выработки, начальный и промежуточные ходы, при помощи которых вы достигнете желаемой цели. Например, чтобы грязное белье каждый раз клалось в корзину, вы можете начать с одного носка и в один прекрасный день "направить" поведение, открыв крышку корзины и сделав так, что носок вот-вот выпадет на пол. Подкрепление может быть словесное, тактильное или любое другое, которое, как вам кажется, скорее всего найдет отклик или будет благосклонно принято вашим соседом. Люди не глупы, они изменяют свое поведение, чтобы получить подкрепление. Даже если раскидывание грязных вещей является своеобразным актом агрессии в отношении вас ("Собери моюодежду, пижон!"), используя положительное подкрепление, вы можете получить устойчивый и зримый процесс в сторону, которую вы считаете приемлемым уровнем аккуратности.

А как насчет того, чтобы формировать свое поведение?

Наука » Психология » Мнемотехника
Существуют всевозможные программы изменения собственного поведения: бросаем курить, следим за своим весом и т.д. Большинство этих программ опирается в основном на метод формирования поведения, обычно называемый модификациями поведения, они могут быть или не быть успешными. Трудность, как мне кажется, состоит в том, что вы должны сами себе давать подкрепление. Но когда вы подкрепляете сами себя, исчезает элемент неожиданности - ученик всегда знает, чего стоит тренер. При этом очень просто сказать: "Черт с ней, с еще одной звездочкой в моей карточке, я лучше выкурю сигарету".

Доказано, что любая программа самовоспитания может служить лишь некоторым людям. Другие могут добиться успеха, только попробовав три или четыре различные программы или после нескольких повторений данного метода. Фактически такие люди могут успешно изменить свою привычку или покончить с пристрастием, но вряд ли это получится с первого раза. Некоторым может в значительной мере помочь внушение или самовнушение. Редактор одного крупного издательства рассказывал мне, что он смог избавиться от очень сильной привычки к курению, научившись от гипнотизера способности впадать в легкий транс с помощью самовнушения и повторять как заклинание фразу вроде "Я не хочу курить" всякий раз, когда он чувствовал непреодолимое желание взять сигарету. По его представлению этот прием "создавал завесу" между ним и сигаретой; облегчение и поздравление себя с победой, когда желание проходило, служило подкреплением. Возможно, такие методы самовнушения привлекают к работе тренера подсознание, что позволяет несколько отделиться от самого субъекта, который представлен сознательной сферой, и тем самым сделать как отрицательное, так и положительное подкрепление более эффективным.

Особые ученики

Наука » Психология » Мнемотехника
Можно формировать поведение почти любого существа.

Психологи обучали крошечных детей движением руки гасить и зажигать свет в комнате. Можно обучать птиц. Можно формировать поведение рыб. Однажды я обучала большого краба-отшельника звонить в колокольчик, собирающий к обеду, дергая клешней за шнурок. (Фокус заключался в том, чтобы дать крабу пищу в тот момент, когда клешня, двигающаяся бесцельно, коснется шнурка. Я пользовалась длинным анатомическим Пинцетом, чтобы подносить кусочки креветки прямо к его челюстям.) Профессор Гарвардского университета Рихард Хернетейн рассказывал, что однажды он обучал морского гребешка хлопать раковиной за пищевое вознаграждение. Дрессировщики морских млекопитающих любят хвастаться что они могут обучить любое животное выполнить любое действие, для которого у него имеются физические и умственные возможности, и насколько мне известно, это так и есть.

Одним из результатов занятий по формированию поведения, особенно если они приносят обучаемому успех, является увеличение продолжительности удерживания внимания; фактически вы формируете продолжительность участия. Однако некоторые организмы, как и следует ожидать, не обладают способностью к длительному удерживанию внимания. От незрелых организмов - щенков, жеребят, детей - никогда нельзя требовать более трех-четырех повторений данного действия, попытки выжать что-либо сверх этого могут отбить охоту или испугать. Это не значит, что незрелые организмы не могут обучаться. Они учатся все время, но короткими периодами.

Ускорение процесса формирования: введение мишеней, подражание, моделирование

Наука » Психология » Мнемотехника
Профессиональные дрессировщики используют ряд приемов, чтобы ускорить процесс формирования. Три из них, которые вам могут быть полезны, это введение мишеней, подражание и моделирование. При введении мишеней, которые часто используются - при дрессировке морских львов и других животных, участвующих в представлениях, вы обучаете животное толкать носом мишень - скажем, кнопку на конце шеста или просто руку дрессировщика, сжатую в кулак. Затем, перемещая мишень и заставляя животное просто следовать за ней и толкать ее, вы можете получить все виды поведения, даже такие, как подъем на лестницу, прыжки или вертикальные стойки, следование за дрессировщиком, вход и выход из транспортировочной клетки и т.д. По сути дела мы используем мишень, когда хлопаем себя по бедру, подзывая собаку. Это движение, видимо, привлекает собак, а когда они приближаются, мы подкрепляем это поведение лаской. Похлопывание рукой по сидению, при приглашении кого-либо сесть рядом, тоже один из видов мишени. Группы японских туристов не теряют друг друга в толпе гораздо более высокорослых людей, следуя за флагом, который держит над толпой их гид - снова мишень. Использование для этих целей штандартов и знамен в битвах является традиционным.