Джон Фишер. О чем думает ваша собака. Методы формирования позитивного поведения

Позитивное подкрепление - это некоторые приятные для человека последствия или результаты деятельности (вознаграждение, похвала, успех и др.), которые побуждают его к выполнению какой-либо деятельности.

Человек после выполнения определенной деятельности может получить одобрение, позитивную оценку, материальное вознаграждение, т.е. позитивное подкрепление. Удовольствие вследствие позитивного подкрепления связывается с деятельностью, таким образом устанавливается связь "деятельность - удовольствие". У человека, согласно принципу удовольствия Фрейда, возникает стремление и в будущем получить удовольствие (похвалу, материальное вознаграждение и т.п.), что побуждает его к выполнению той деятельности, которую подкрепляли, т.е. которая связывалась с удовольствием.

Если процесс деятельности или его результат не подкрепляется (т.е. когда не было ни одобрения, ни вознаграждения и соответственно удовлетворения), то в таком случае менее вероятно, что в будущем человек будет выполнять эту деятельность по собственному желанию. Следовательно, при отсутствии связи "деятельность - удовольствие" субъект не будет стремиться к ее выполнению.

Позитивные переживания, которые связываются с определенной деятельностью, выполняют роль эмоционального подкрепления того, что происходило до или во время переживания. Вследствие этого человек будет стремиться выполнять то, что вызвало удовольствие или то, что предоставило возможность избежать неудовольствия. Если какое-то действие сочеталось с приятным переживанием, то сочетание позитивных эмоций с деятельностью усиливает мотивацию (интерес) к этой деятельности.

Приведем несколько примеров позитивного подкрепления.

1. Вследствие успешных занятий физикой ученик получает одобрения от учителей, родителей и друзей (подкрепление 1), высокие оценки (подкрепление 2), призовые места на олимпиадах (подкрепление 3), одобрения друзей за интересные опыты и помощь в решении задач (подкрепление 4). Удовольствие, которое возникает вследствие подкрепления, будет побуждать его к занятиям физикой. Предвкушая получение удовольствия, ученик будет усиленно заниматься этим предметом. Физика связывается с удовольствием и в будущем сама по себе будет приятна для ученика. Чем сильнее подкрепление (большее число подкреплений и соответственно большее удовольствие), тем более привлекательной становится физика для ученика.

2. Ребенок за определенные действия (например, за помощь старшим) получает похвалу от взрослых (подкрепление 1), материальное вознаграждение, например конфеты, шоколад (подкрепление 2), определенные поблажки (подкрепление 3).

Стремление получить удовольствие (похвалу, конфеты, поблажки и т.п.) будет побуждать ребенка и в будущем к выполнениюэтих действий.

3. Если изготовив, например, полку или стул, человек почувствовал удовольствие вследствие успешного завершения работы и пользы от него (подкрепление 1), материального вознаграждения (подкрепление 2), одобрения жены или родителей (подкрепление 3), то, предвкушая возможность получить подкрепление (и удовольствие), он и впредь будет стремиться что-либо изготавливать.

Определенные формы поведения закрепляются (и повторяются в будущем) тогда, когда они сопровождаются позитивными последствиями (вознаграждением, одобрением, возможностью самоутвердиться). И вероятность их повторения, как правило, уменьшается, если эти действия не связаны с приятными эмоциями, или же, наоборот, сопровождаются чем-то негативным (наказанием, неодобрением и т.п.).

Эти закономерности часто используют учителя и родители: регулярно прибегая к похвале, они формируют у детей соответствующую мотивацию и поведение. А чтобы удержать детей от нежелательных действий и поступков, применяют наказание, неодобрение, выражая неудовлетворенность действиями ребенка. Если человек получает позитивное подкрепление (одобрение, вознаграждение) за определенные формы поведения, то такие действия закрепляются и в будущем воспроизводятся. А прибегая к наказанию, человека заставляют избегать определенных действий: например, наказывая ребенка за кражу, стремятся принудить его не воровать в будущем.

Родители, по мнению Скиннера, могли бы целиком полагаться на позитивное подкрепление (например, на одобрение), никогда не наказывая ребенка. Вследствие использования одобрения воспитание ребенка является высокоэффективным и гуманным. Однако в воспитательном процессе нередко прибегают к наказанию, которое не всегда является эффективным, а часто и вредит воспитанию личности. Подвергаясь наказанию за определенные действия или бездеятельность, человек впредь будет действовать "так, как нужно" не потому, что ему так хочется, а потому, что боится наказания. И когда угроза наказания исчезает, то предыдущие нежелательные формы поведения восстанавливаются.

Позитивное подкрепление

Любой стимул, подкрепляющий поведение, которое ему предшествовало. Позитивные стимулы обычно нейтрализуют состояние «первичного драйва» (например, ), являются наградой или создают привлекательную ситуацию. В определенном смысле, позитивное подкрепление определяется его последствиями. Оно укрепляет реакцию и делает более вероятным ее проявление в будущем. В роли позитивного подкрепления могут выступать самые странные события. Например, для некоторых детей выговор от учителя в присутствии сверстников может рассматриваться как позитивное подкрепление, если он повышает «уличную репутацию» потерпевшего. Любое поведение, которое приводит к позитивному подкреплению, становится более частым.

Психология. А-Я. Словарь-справочник / Пер. с англ. К. С. Ткаченко. - М.: ФАИР-ПРЕСС . Майк Кордуэлл . 2000 .

Смотреть что такое "Позитивное подкрепление" в других словарях:

- (positive reinforcement). Также называется обучением вознаграждением; субъект получает вознаграждение за свое поведение, и проявление такого поведения повышается … Психология развития. Словарь по книге

Позитивное подкрепление - (Positive reinforcement). Предъявление приятного стимула после реакции, повышающее вероятность ее повторения … Теории личности: глоссарий

КОГНИТИВНО-ПОВЕДЕНЧЕСКАЯ ПСИХОТЕРАПИЯ - Первый опыт применения поведенческой терапии основывался на теоретических положениях И. П. Павлова (классическое обусловливание) и Скиннера (Skinner В. F.), (оперантное обусловливание). По мере того как новые поколения врачей… …

Модификация привычных (а) представлений о ком либо или о чем либо, сформированных ранее знаний, (б) отношений, убеждений, (в) моделей, программ, действий, операций, способов привычного поведения, образа жизни, О.; сформированных ранее умений,… …

Дрессировка - (от фр. dresser выправлять, обучать) выработка фиксированных форм поведения с помощью чередования положительных и отрицательных подкреплений. Дрессировка один из древнейших методов управления животными и людьми. Многие люди … Википедия

МЕТОДИКА НАВОДНЕНИЯ - Относится к поведенческим методам. Если при систематической десенсибилизации погружение в ситуацию, вызывающую страх, происходит постепенно, то в других методиках подчеркивается эффективность быстрого столкновения, переживания сильной… … Психотерапевтическая энциклопедия

СКИННЕР - Беррес Фредерик (Skinner В. F., 1904 1990). Известный психолог, лидер современного бихевиоризма. С. родился в 1904 г. в Саксуэханне, штат Пенсильвания, США. Окончил Гамильтон колледж в 1926 г. Степень доктора философии получил в 1931 г. в … Психотерапевтическая энциклопедия

- (от англ. behavior поведение) ряд тщательно разработанных методов лечения (в т. ч. сексуальной дисфункции в семье, супружеских конфликтов), направленных на изменение или формирование новых шаблонов О., т. е. на искоренение нежелательного… … Психология общения. Энциклопедический словарь

Девиантное поведение (Д. п.) (от англ. deviant отклоняющийся; лат. deviatio отклонение, расстройство) это устойчивое поведение личности, отклоняющееся от наиболее важных социальных норм, причиняющее реальный ущерб обществу или самой личности, а… … Психология общения. Энциклопедический словарь

- (от лат. complexus связь, сочетание) одно из центральных понятий фрейдизма, возникающий в раннем детстве комплекс представлений и чувств, главным образом бессознательных, заключающихся в половом влечении к родителю противополо … Большая психологическая энциклопедия

Существуют альтернативные варианты использования земли . Иначе говоря, землю можно использовать не только для возделывания пшеницы, овса, проса, выращивания скота, но и в качестве участка под дом или завод. О чем говорит этот факт?

С точки зрения общества , нет альтернативы в использовании земли, как только самим обществом. Совокупное предложение земли всегда будет, даже если никакая рента не выплачивается за ее использование, поэтому для общества рента ¾ это излишек, который должен принадлежать всем членам общества. Иначе говоря, с точки зрения общества, земля не имеет издержек производства .

С точки зрения же фирм , земля имеет альтернативные варианты использования, поэтому рентные платежи должны производиться конкретными фирмами, чтобы исключить иное применение земли. Исходя из этого для фирм рентные платежи выступают как издержки. Причем рента взимается с земель, используемых не только для сельского хозяйства, но и для добычи полезных ископаемых, строительства и т. д. Для этих земель также применим механизм действия дифференциальной, абсолютной и монопольной ренты.

Позитивное подкрепление (похвала, оценки, награды)

Что такое позитивное подкрепление?

Позитивное подкрепление и наказание

Виды позитивного подкрепления

Зависимость эффекта подкрепления от интенсивности позитив­ных эмоций (силы удовольствия)

Сочетание подкрепления с быстрой обратной связью и фиксаци­ей результатов деятельности

Сочетание подкрепления с поэтапной программой выполнения серии систематических рабочих шагов

Развитие социально нежелательных привычек и потребностей вследствие позитивного подкрепления

Ослабление интереса (процессуально-содержательной мотива­ции) под влиянием регулярного внешнего подкрепления

1.1. Что такое позитивное подкрепление?

Позитивное подкрепление - это некоторые приятные для человека последствия или результаты деятельности (вознагра­ждение, похвала, успех и др.), которые побуждают его к вы­полнению какой-либо деятельности.

Человек после выполнения определенной деятельности мо­жет получить одобрение, позитивную оценку, материальное вознаграждение, т.е. позитивное подкрепление. Удовольствие вследствие позитивного подкрепления связывается с деятельностью, таким образом устанавливается связь «деятельность - Удовольствие». У человека, согласно принципу удовольствия Фрейда, возникает стремление и в будущем получить удовольствие (похвалу, материальное вознаграждение и т.п.), что побуждает его к выполнению той деятельности, которую подкрепля­ли, т.е. которая связывалась с удовольствием.

Если процесс деятельности или его результат не подкрепля­ется (т.е. когда не было ни одобрения, ни вознаграждения и соответственно удовлетворения), то в таком случае менее веро­ятно, что в будущем человек будет выполнять эту деятельность по собственному желанию. Следовательно, при отсутствии связи «деятельность - удовольствие» субъект не будет стремиться к ее выполнению.

Позитивные переживания, которые связываются с опреде­ленной деятельностью, выполняют роль эмоционального под­крепления того, что происходило до или во время переживания. Вследствие этого человек будет стремиться выполнять то, что вызвало удовольствие или то, что предоставило возможность избежать неудовольствия. Если какое-то действие сочеталось с приятным переживанием, то сочетание позитивных эмоций с деятельностью усиливает мотивацию (интерес) к этой деятель­ности.

Приведем несколько примеров позитивного подкрепления.

1. Вследствие успешных занятий физикой ученик получает одобрения от учителей, родителей и друзей (подкрепление 1), высокие оценки (подкрепление 2), призовые места на олимпиа­дах (подкрепление 3), одобрения друзей за интересные опыты и помощь в решении задач (подкрепление 4). Удовольствие, ко­торое возникает вследствие подкрепления, будет побуждать его к занятиям физикой. Предвкушая получение удовольствия, уче­ник будет усиленно заниматься этим предметом. Физика связы­вается с удовольствием и в будущем сама по себе будет прият­на для ученика. Чем сильнее подкрепление (большее число под­креплений и соответственно большее удовольствие), тем более привлекательной становится физика для ученика.

2. Ребенок за определенные действия (например, за помощь старшим) получает похвалу от взрослых (подкрепление 1), ма­териальное вознаграждение, например конфеты, шоколад (подкрепление 2), определенные поблажки (подкрепление 3). Стремление получить удовольствие (похвалу, конфеты, поблаж­ки и т.п.) будет побуждать ребенка и в будущем к выполнению этих действий.

3. Если изготовив, например, полку или стул, человек почувст­вовал удовольствие вследствие успешного завершения работы и пользы от него (подкрепление 1), материального вознагражде­ния (подкрепление 2), одобрения жены или родителей (подкреп­ление 3), то, предвкушая возможность получить подкрепление (и удовольствие), он и впредь будет стремиться что-либо изго­тавливать.

1.2. Позитивное подкрепление и наказание

Определенные формы поведения закрепляются (и повторя­ются в будущем) тогда, когда они сопровождаются позитивны­ми последствиями (вознаграждением, одобрением, возможно­стью самоутвердиться). И вероятность их повторения, как пра­вило, уменьшается, если эти действия не связаны с приятными эмоциями, или же, наоборот, сопровождаются чем-то негатив­ным (наказанием, неодобрением и т.п.).

Эти закономерности часто используют учителя и родители: регулярно прибегая к похвале, они формируют у детей соответ­ствующую мотивацию и поведение. А чтобы удержать детей от нежелательных действий и поступков, применяют наказание, неодобрение, выражая неудовлетворенность действиями ребен­ка. Если человек получает позитивное подкрепление (одобрение, вознаграждение) за определенные формы поведе­ния, то такие действия закрепляются и в будущем воспроизво­дятся. А прибегая к наказанию, человека заставляют избегать определенных действий: например, наказывая ребенка за кра­жу, стремятся принудить его не воровать в будущем.

Родители, по мнению Скиннера, могли бы целиком полагать­ся на позитивное подкрепление (например, на одобрение), ни­когда не наказывая ребенка. Вследствие использования одоб­рения воспитание ребенка является высокоэффективным и гу­манным. Однако в воспитательном процессе нередко прибегают к наказанию, которое не всегда является эффективным, а часто и вредит воспитанию личности. Подвергаясь наказанию за оп­ределенные действия или бездеятельность, человек впредь бу­дет действовать «так, как нужно» не потому, что ему так хочет­ся, а потому, что боится наказания, И когда угроза наказания исчезает, то предыдущие нежелательные формы поведения восстанавливаются.

Прибегая исключительно к наказанию, по нашему мнению, невозможно сформировать внутренне мотивированную деятель­ность. В случае же использования наказания эффективно сочетать его с позитивным подкреплением. Например, поругав девочку за то, что она не помогла бабушке (наказание), следует также напомнить, что она раньше помогала маме (позитивное подкрепление 1), всегда помогает брату (позитивное подкреп­ление 2). Любые попытки помочь следует эмоционально подкреплять.

1.3. Виды позитивного подкрепления

Чтобы сформировать необходимое поведение, следует вы­делять такие действия ребенка, которые являются социально желательными, и подкреплять их одобрением, вознаграждением и другими видами подкрепления. Можно выделить разнообраз­ные виды позитивного подкрепления.

Похвала (одобрение). Учитель, руководитель, тренер одобряет действия своего подчиненного (ученика) за высокие результаты работы. Позитивное подкрепление (похвала) в из­вестной степени зависит от взаимных отношений руководителя и подчиненного. Похвала старших (руководителей, родителей и др.), с которыми субъект деятельности (подчиненный, ученик) пребывает в хороших отношениях, как правило, имеет большое влияние. Однообразие форм одобрения и слишком регулярное их использование уменьшает действие такого подкрепления.

Привилегии и увеличение статуса. За высокую академиче­скую успеваемость студента могут выбрать старостой группы, спортсмена - капитаном команды, рабочего - бригадиром, инженера - руководителем отдела и т.п. Изменение формаль­ного или неформального статуса имеет эффект подкрепления. Ожидание повышения статуса оказывает большое влияние на личность (стимулирует к деятельности).

Лучшие фирмы умеют использовать этот мотивационный фактор в управлении. Достаточно разветвленная иерархизированная система управления (наличие многих подразделений, групп) оказывает существенное влияние на мотивацию как ру­ководящего состава, так и рядовых работников. У человека есть стимул стать руководителем даже небольшого структурно­го подразделения или группы, а достигая желанного статуса, он пытается подняться еще выше по иерархической лестнице.

Возможность получить определенные привилегии, повыше­ние заработной платы, возможность руководить и тем самым удовлетворять свою потребность во власти - существенный мотивационный фактор. Это побуждает человека добиваться должности, прилагать большие усилия для ее получения. Он стремится подняться выше в иерархии управления. Возмож­ность влиять на людей и быть субъектом изменений («источ­ником»), а не объектом и пассивным исполнителем чужой воли («пешкой») является достаточно привлекательной. Человек стремится сам влиять, определять, решать, а не быть объектом влияния других людей,

Доверие, внимание, оценка твоих способностей, возмож­ность продемонстрировать себя руководителем (лидером) - все это побуждает человека работать еще настойчивее (Уотермен, 1988).

Фирмы в США и Европе практикуют также создание вре­менных формальных и неформальных групп (например, для разработки определенного проекта). Назначается руководитель (лидер) группы, наделенный некоторыми полномочиями. Это имеет большое мотивационное влияние на данного человека, он будет стремиться оправдать доверие и самоутвердиться. Разно­образие форм руководства, иерархизованность и разветвленность управленческих структур - это возможность самоутвер­диться для многих людей.

Оценки, баллы, тестовые показатели. Оценки «хорошо» и «отлично», высокий рейтинг, высокие тестовые баллы оказыва­ют значительное побуждающее влияние. Следует отметить, что более дифференцированная система оценивания имеет большее мотивационное значение. В этом случае подчиненный (ученик) может сравнивать собственные достижения не только с резуль­татами других людей, но и со своими предыдущими достиже­ниями. Например, получив за выполнение теста по английскому языку 480 баллов, он будет стремиться улучшить свой показа­тель (ведь это далеко не максимальный, хотя относительно и неплохой результат). Это будет сильнее побуждать к деятельно­сти, чем просто оценка «хорошо». Стимулирует к работе не только позитивная оценка, но и видение перспектив, стремление превзойти свои достижения.

Наибольший мотивационный эффект наблюдается тогда, ко­гда представлена не только общая (средняя) оценка, но и оценка по каждому из компонентов. Например, после выполнения т еста по английскому языку, кроме общего результата (480), сообщают также показатели по каждому из трех его компонен­тов.

Так, по шкале восприятия устной речи ученик получил 430 бал­лов, по шкале понимания грамматических конструкций резуль­тат составил - 520, а словарный запас (третья шкала) был оце­нен в 490 баллов.

Такая дифференцированная система оценивания имеет характер позитивного подкрепления (ведь 520 и 490 баллов - это впол­не пристойный результат), и одновременно наблюдается нега­тивная обратная связь (ведь 430 баллов по первой шкале - это низкий показатель). Ученик понимает, что на восприятие устной Речи следует обратить большее внимание. Это побуждает его к интенсивным занятиям в данном направлении. Он ощущает не­обходимость самосовершенствоваться и видит перспективы (стремится превзойти собственное достижение).

Традиционная система оценивания, которая до сих пор прак­тиковалась в наших школах и вузах, лишена всех преимуществ тестирования и дифференцированного оценивания. Ведь полу­чив оценку «отлично» за контрольную работу (или на экзаме­не), человек не знает, каков уровень его знаний по сравнению с десятью учениками (студентами), получившими такие же оценки. Тогда как, например, двадцатибалльная система оценивания имела бы большее мотивационное влияние.

Я получил 12 баллов из 20 (вместо традиционной оценки «отлично»). Это высокий показатель, но не самый высокий (я шестой по рейтингу). Я начинаю рассуждать: почему у меня не первый-второй результат, ведь я считал себя, по крайней мере, вторым в группе. Я стремлюсь улучшить собственное достиже­ние, работаю над своими ошибками, внедряю новые формы и методы работы. В следующий раз я получил 14 баллов из 20. Это уже лучший показатель, я удовлетворен, но на этот раз я только второй по рейтингу. Опять работаю над собой, пытаясь превзойти собственное достижение и улучшить свой рейтинг.

Материальное вознаграждение. Призы, подарки, премии, денежное вознаграждение оказывают большое влияние на мо­тивацию любой деятельности. Но при систематическом исполь­зовании эти формы позитивного подкрепления могут негативно влиять на процессуально-содержательную мотивацию. Напри­мер, если ребенок получает деньги (или что-то материальное) за хорошие оценки, то вряд ли у него возникнет понимание важности учебы самой по себе. Если прекратить давать деньги за оценки, то ребенок, привыкая получать материальное возна­граждение, будет менее склонен выполнять эту деятельность (т.е. процессуально-содержательная мотивация может умень­шаться).

Метод положительного подкрепления можно применять при дрессировке любых животных, но особенно он подходит для собак. Это система, целиком опирающаяся на побудительный мотив (стимул) и отвергающая физическое воздействие или силу в любых их проявлениях. Этим методом могут пользоваться даже дети. Он не требует какого-либо природного дара (таланта) дрессировщика. Он не связан с каким-то особым тоном, выбором подходящего времени, не основан на регулярной практике и не опирается на какую-либо из традиционных теорий дрессировки собак. Все, что требуется – ваш разум и какой-нибудь лакомый кусочек.

Как научить собаку, чтобы она по команде ложилась в каком-нибудь определенном углу комнаты? Для этого существует два способа:

1. Можно бить собаку плеткой всякий раз, когда она пойдет в какой-либо другой угол и вообще бить до тех пор, пока она не усвоит, что указанное вами место – единственное безопасное убежище.

2. Можно дать собаке особенно вкусный кусочек в этом уголке и полностью ее игнорировать, когда она пойдет в какую-то другую часть комнаты.

Я совершенно уверен, что, прочитав эти строки вы сказали себе: «Ну, это рассуждения на уровне здравого смысла. Что тут такого нового?» Разумеется, это здравый смысл. Каждый владелец собаки ежедневно поступает подобным образом и дома, и вне его стен, не задумываясь о том, что и как он делает. Хотя почему-то, когда требуется сделать некоторое усилие и чему-нибудь научить свою собаку, мы становимся в позу дрессировщика и вспоминаем стародавний подход: «Ты собака, я хозяин. Я приказываю, ты подчиняешься».

Когда дома вы подзываете собаку, вы обычно намерены покормить ее или взять на поводок и повести на прогулку, или показать, что вы уронили еду на пол в кухне и хотите, чтоб она все подчистила. Действительно, дома мы редко зовем собаку просто так, обычно это происходит по какой-то причине, и в большинстве случаев выполнение команды сулит собаке что-то приятное. В результате лишь немногие люди жалуются, что собака не идет на зов дома. А в ближайшем парке дело обстоит совсем иначе. Вы гуляете, она свободно бегает, играя с другими собаками, охотится за белками, роется в мусорных урнах, в то время как вы погрузились в собственные мысли. У ворот парка вы зовете ее, чтобы вести домой. И тут она, бросив на вас взгляд, направляется в противоположную сторону. (Такое все мы видим на улице чуть не каждый день.) В этот момент вы говорите себе: «Я должен наконец выдрессировать свою собаку». Вы ее уже выдрессировали. Вы преуспели в том, что научили ее не подходить к вам. Как? Очень просто. Собака быстро усвоила: если она не подойдет, то будет вознаграждена более длительной прогулкой. Если же она к вам подойдет, то лишится удовольствия: ее отведут домой.

Если бы вы применили ваши «домашние приемы» дрессировки команды «Ко мне!», подзывая пса около ворот, давая лакомство и затем делая еще круг по парку, то вскоре, услышав зов, он летел бы к вам пулей. Подкуп? Я называю это здравым смыслом. Сколько раз уже мне приходилось прятать улыбку, когда ко мне обращались люди, которые сталкиваются с проблемами нежелательного поведения своих собак, и я в ответ предлагаю им попробовать награждать собаку за хорошее поведение, вместо того чтобы думать, каким образом наказать ее за нежелательное поведение. Хозяева недоумевают: «Вы хотите сказать, что я должен его подкупать?» По-моему, это довольно забавно: то, чему ученые, психологи и бихевиористы (специалисты по проблемам поведения) придумали замысловатые названия вроде «модификации поведения», «реабилитационная психотерапия», «психология поведения» и так далее, широкой публикой все еще расценивается как подкуп.

Впрочем, на самом деле важно другое – при правильном применении положительное подкрепление весьма эффективно: оно изменяет нежелательное поведение. Существует ряд основополагающих принципов, которые определяют успех применения положительного подкрепления как метода дрессировки. Но прежде чем начать применять эти принципы или законы с помощью специальных обучающих упражнений в процессе дрессировки собак, необходимо рассмотреть отдельно каждую стадию обучения, ее цель и желаемый результат.

Как действует положительное подкрепление

Прежде всего мы вообще должны забыть об упражнениях. Все, что нас интересует для начала – это первый шаг в нужном направлении. Представим себе, например, что мы хотим научить касатку выпрыгивать из воды. Мы даем свисток (команду) и ждем. Затем ждем еще немного, а зачастую бывает, что ждем еще и еще. Очевидно, сначала касатка не имеет представления о том, что от нее требуется, когда звучит свисток. Поэтому нам приходится ждать, чтобы она зачем-нибудь высунула нос из воды. Точно в этот миг мы снова свистим в свисток и даем ей рыбу. Когда она проплывает внизу, мы снова свистим и ждем. Процедура повторяется до тех пор, пока касатка не выйдет на уровень «ага!»: «Ага! Когда я слышу звук свистка, я получаю рыбу». Этот уровень понимания – уровень «ага!» – не может считаться закрепленным, до тех пор вы не добьетесь, чтобы происходило десять из десяти возможных немедленных реакций на свисток. Пока это не достигнуто, не следует переходить к следующему этапу дрессировки.

На первом ее этапе кажется, что прогресс не очень заметен, однако для успеха обучения крайне важно, чтобы каждый этап заканчивался достижением уровня полного понимания. Если вы этого добьетесь, то обнаружите, что, по мере перехода к каждому следующему этапу превращение первоначальной реакции в распознаваемую цепочку движений идет очень быстро. Теперь мы подходим к этапу дрессировки, который называется «формирование». Нам нужно заменить уже сложившуюся цепочку: «свисток – появление носа – обязательная рыбка», новой цепочкой: «свисток – касатка выпрыгивает из воды – рыбка дается иногда». Достигается это следующим образом. Формирование поведения означает, что мы делаем один маленький шаг в нужном направлении и продвигаемся к конечной цели, подкрепляя каждый сделанный шаг. Так мы обеспечиваем безусловное выполнение этой части цепочки, прежде чем двигаться дальше.

Здесь наблюдается интересное явление: выполнение определенных действий, надежно затренированное с помощью вознаграждения, можно сделать еще более четким, если вознаграждение задерживать. Предположим, затренирована такая реакция касатки: на десять свистков она десять раз немедленно высовывает нос из воды. На одиннадцатый раз говорим: «Недостаточно хорошо, рыбы ты не получишь». Можно предположить, что теперь касатка подумает: «Но я всегда получаю рыбку. Наверное, кто-то ее стащил раньше меня. В следующий раз надо живее пошевеливаться». И на двенадцатый раз вы получите более быструю и энергичную реакцию касатки: она высунет из воды всю голову целиком. За это безусловно полагается рыбка, но теперь и в дальнейшем – только за это.

Дальше будем формировать цепочку: «свисток -появление из воды всей головы целиком – при немедленной реакции рыбка в награду в десяти случаях из десяти». Лишь затем можно будет перейти к следующему этапу. Кажется, что обучаемый с каждым этапом все скорее понимает, что от него требуется и возникает эффект снежного кома.

Я намеренно воспользовался примером касатки чтобы подчеркнуть главное: весь процесс обучения может осуществляться без какого-либо физического воздействия. Сначала мы ждем верного шага в нужном направлении и вознаграждаем его, затем закрепляем и придаем законченную форму.

Хозяин: «Какая разница между всем этим и подкупом?» Я: «Подкуп – это использование награды в качестве соблазна, для того чтобы стимулировать движение. Подкрепление – это вознаграждение, получаемое за добровольное движение». Хозяин: «Всегда ли давать награду?» Я: «Прием действует лучше, если вы даете награду не всегда. Когда модель поведения сформирована, только самая быстрая, ярко выраженная и сильная реакция вознаграждается. Иногда ученику придется выполнить отработанную цепочку шесть или семь раз, прежде чем последует вознаграждение». Хозяин: «Обязательно ли давать в награду что-то съедобное?» Я: «Наградой может быть что-то другое, ради чего, с точки зрения ученика, стоит выполнять определенные действия. Было бы бессмысленно пытаться сформировать мое поведение с помощью тарелки капусты, если я терпеть не могу капусту!

Как применять положительное подкрепление

В главе «Как учатся собаки» я рассказал о том, как научил свою первую собаку искать и приносить вещь (соответствует команде «Аппорт!»). Теперь я расскажу вам, как я научил выполнять это задание свою нынешнюю собаку. На обучение моей первой собаки ушло несколько недель, и она так и не научилась выполнять команду по-настоящему хорошо. Это была немецкая овчарка – порода славится хорошей обучаемостью. Моя теперешняя собака выполняет то же задание с огоньком в глазах и невероятной для собаки ее размеров быстротой. Это – японская акита, порода, известная своим упрямством.

Я провел много времени на дрессировочной площадке, в течение ряда недель обучая мою немецкую овчарку. В течение нескольких дней, затрачивая по несколько минут в день, я обучил акита, ни разу даже не встав с кресла. Используя этот метод, я недавно помог проводнику полицейской собаки достичь того же результата при дрессировке немецкой овчарки. Фактически нам потребовалось меньше обычного времени, чтобы довести совершенно необученную собаку до стандарта министерства внутренних дел, причем достигнутые результаты были гораздо выше тех, которых добиваются, применяя обычные методы дрессировки.

Кличка моей собаки – Йоко. Поняли? Джон Йоко. Ей было пятнадцать месяцев, когда я реши научить ее искать и приносить брошенный предмет. Сейчас у меня не остается времени, чтобы самому участвовать с моими собаками в соревнованиях, где собаки демонстрируют свои умения, но я все еще сужу такие состязания. И вот однажды один хозяин-участник обронил мимоходом замечание, которое побудило меня учить мою собаку искать и приносить брошенный предмет. Парень сказал: «Вы никогда не научите акита выполнять эту команду как следует». Когда мне бросают вызов, я загораюсь.

Я сидел за письменным столом в своей приемной, рядом на столе я поставил коробочку с лакомством. Протягивая собаке гантель, я говорил: «Возьми!» Йоко нюхала перекладину, а я говорил: «Хорошая девочка!» – и давал ей угощение. Первое занятие продолжалось около пяти минут, и она получила вознаграждение сразу после быстрой реакции примерно в 60% случаев. В остальных случаях за правильные реакции иногда тоже давалось вознаграждение, но только после того, как собака нюхала стол, карабкалась на меня, лаяла или делала еще что-нибудь, стараясь получить вознаграждение. На следующем занятии в тот же день был достигнут уровень понимания (уровень «ага!»). Йоко тыкалась носом в гантель всякий раз, когда я давал команду. На формирование действия и переход к следующей стадии потребовалось несколько больше времени. В течение четырех занятий по пять минут каждое она пробовала делать самые разные вещи чтобы получить награду. Отношение было: 15%; 25%; 70%; 100%. Теперь я уже требовал, чтобы она не тыкалась в гантель носом, а лизала ее. Не дав ей угощения, когда она в очередной раз лизнула гантель, я попал в точку, что вызвало эффект снежного кома гораздо раньше, чем я сам того ожидал. Она решительно выхватила гантель у меня из рук смотрела на меня, как будто говоря: «Смотри, глупыш, я ее взяла... Давай еду!»

Никто не может заранее определить модель формирования поведения при выполнении задания. Мы можем запланировать известную структурированную последовательность, но при обучении нам придется руководствоваться темпом, который установит само животное. После того как вы вознаградили собаку за определенное движение, оно должно стать единственным движением, за которое дается награда, пока оно не будет затренировано. Йоко сделала больший шаг вперед, чем я ожидал, и, поскольку я ее с энтузиазмом наградил, мне пришлось ждать, чтобы она его повторила. Это отняло меньше времени, чем я ожидал, но надо учесть, что Йоко очень прожорливая собака.

После такого огромного рывка вперед вся цепочка действий формировалась очень легко. Прошло совсем немного времени, и я уже бросал гантель на кушетку в дальнем конце приемной, а Йоко приносила ее по команде и садилась передо мной, держа ее в зубах, гордая. В первый же раз, когда на свежем воздухе я опробовал дать одно из тех упражнений, что предлагаются на состязаниях, она получила бы у меня за их выполнение все десять баллов из десяти. Но кажется, я несколько пристрастен.

Возьмем теперь два простых действия: выполнение команд «Сидеть!» и «Лежать!». Попытаемся, используя наш метод и не применяя силу, научить собаку четко реагировать на данные команды. Чтобы ускорить процесс, необходимо прибегнуть к подкупу. Иными словами, мы показываем награду, чтобы стимулировать движение. Как только достигается этот уровень понимания, мы обращаемся к команде и подаем ее только голосом, затем ждем, чтобы было сделано верное движение. Тогда мы придаем этому движению законченный вид. Для отработки команды «Сидеть!» покажите собаке лакомство, даже дотроньтесь им до кончика ее носа. Скажите: «Сидеть!» – и медленно переместите лакомство вверх и назад, чуть дальше линии глаз собаки. Сложение у собак такое, что если голова поднимается вверх и назад, то задняя часть туловища непременно опускается.

Для отработки команды «Лежать!» выберите такое препятствие, чтобы для его преодоления собаке нужно было лечь на брюхо. Это будет зависеть от размера собаки. Например, для немецкой овчарки подошел бы кофейный столик. Подведите к нему собаку и предложите ей лакомство, держа его в руке под столиком, то есть под препятствием. Когда собака потянется за лакомством, медленно отодвигайте его под препятствием, побуждая собаку двигаться следом и командуя при этом: «Лежать!» В тот момент, когда ее брюхо коснется пола, дайте вознаграждение.

Теперь, когда мы научили свою собаку делать то, чего мы от нее добиваемся, остается отучить ее делать то, что нам не нравится. Для достижения этой цели используем систему отрицательного подкрепления.

Один из самых значимых вопросов для человека - как возникает ощущение полноты жизни?

Как рассмотрено в статье , наши разные состояния обеспечиваются разными «подсистемами активации мозга», которые могут включаться в разных комбинациях.

Наиболее субъективно приятные, и при этом, обеспечивающие объективно более эффективное функционирование психики – это состояния интереса и безмятежности. В этих случаях личность «открыта», и не имеет «подчиненной зависимости» от конкретного образа (идеи, процесса и т.п.).

В отличие от интереса, при механизме желания мы ставим себя в зависимость от реализации чего-то, и не можем отвязаться от этого просто так. Заметим, что желание может быть направлено как на достижение чего-либо, так и на избегание.

Зависимость желания может закрепляться врожденно (еда, инстинкт выживания и т.д.), а может приобретаться.

Постановка под контроль врожденных желаний – задача не простая, и может нарушить психический и психофизиологический баланс. Рассмотрим механизм приобретенных желаний.

Разберем разные варианты работы сознания в «режиме» желания:

1. Желание удовлетворяется без принуждения

• достижение желаемого легко, либо полное согласие с дополнительными усилиями, необходимыми для достижения переживание удовлетворения -
• память об удовлетворении -
• желание повторить в будущем.

Самый здоровый вариант. Нормальная психика не может удовлетвориться одними желаниями и имеет достаточно выраженный интерес (открытость новому, без формирования зависимости).

Проблема в том, что это вариант – далеко не единственный, в режиме которого функционирует наше сознание.

1. Желание удовлетворяется с принуждением

Процессы в сознании меняются по следующей цепочке:

• Формирование образа желаемого -
• понимание необходимости совершить вынужденное действие для достижения желаемого -
• не желание это делать -
• осуществление необходимых действий на фоне явного или скрытого нежелания -
• достижение желаемого -
• переживание удовлетворения МЕНЬШЕ, чем в варианте 1 -
• память об удовлетворении желания и о принуждении -
• желание повторить всю цепочку в будущем слабее, чем в первом случае, т.е. «первичные» («естественные») желания человека становятся слабее -
• накопление от многих таких цепочек состояния вынужденности -
• приучение себя к состоянию вынужденности, наличию мотивационных конфликтов и волевому контролю – такое состояние становиться постоянным -
• периодические попытки «пробиться» через заслоны вынужденности - плохо контролируемые желания, нелогичные поступки, попытки ухода в «нетрадицонное» описание мира, в котором человек якобы будет более свободен и т.д. -
• Часто это завершается устойчивым формированием неадекватной оценки своих возможностей, своего места в мире и т.п.

1. Принуждение есть, но желание не удовлетворяется

Сплошь и рядом человек вкладывается в вынужденные действия, но не получает желаемого. Или получает не в полной мере, или не совсем то и т.п.

Сочетание постановки себя в зависимость от достижения желаемого и частый крах ожиданий вырабатывают у человека РАВНОДУШИЕ. Он все меньше чего-то хочет в принципе, или ограждает себя от определенных сфер жизни.

1. Самоограничение желания

На одном уровне психики человек чего-то хочет, на другом не позволяет себе этого. Но оно никуда не исчезает, хотя может и становиться незаметным для осознания на какое-то время.

Личность человека накапливает внутренние противоречия и «скрытые» мотивационные вектора, человек становится все менее способным собрать себя для движения в каком-либо направлении ради себя. А вот движение «потому что надо» может оставаться (см. вариант 2).

Так вот, состояние равнодушия и состояние постоянного избыточного мотивационного контроля на фоне вынужденности – это определенные РЕЖИМЫ работы сознания.

И их трудно трансформировать исключительно за счет чисто психологических техник, самоанализа и т.п.

Очень значительный эффект могут оказать околомедитативные занятия, направленные на возвращение в «позитивные» режимы.

Варианты «позитивных» режимов желания / интереса

1. Интерес к простым впечатлениям

Режим, который был выражен у нас в раннем детстве, и «включается» периодически. Восприятие практически любого наблюдаемого объекта, телесного ощущения и т.п. вызывает интерес и удовлетворение ОДНОВРЕМЕННО, без необходимости ставить «отдаленные» цели. При этом значительно повышается переживание "полноты жизни".

В этом режиме происходит естественное позитивное «подкрепление» высшей психической активности подкорковыми структурами. Резко снижаются затраты ресурсов на высший контроль, преодолевается фильтр равнодушия. Точнее, этот режим и становиться возможным при преодолении фильтра равнодушия.

1. Ощущение действий

Человек учится «присоединять» всю свою деятельность к механизмам подкрепления. Не оценку, а ОЩУЩЕНИЕ от деятельности. Грубо говоря – почистил картошку – получил «приход».

1. Сознательное подкрепление реализации желаний и целей

Человек учится четко осознавать:

• Возникновение желаний и целей,
• их скрытое наличие и занимаемое ими «место» в мотивационной сфере.
• момент реализации желания или целей, возникшее позитивное подкрепление, закрепление этого в памяти.

Это приучает сознание больше усиливать позитивное подкрепление.

При этом происходит также осознание сопутствующей необходимости, требуемой для реализации желания, и трансформация ее в личностный смысл.

Результаты

За относительно небольшой срок соответствующей эффективной практики происходит привыкание к «правильным режимам». Это говорит о перестройке связей между высшей корой, разными подкорковыми ядрами и пр. Жизнеощущение человека становится совсем другим.

В первую очередь повышается «приход» от позитивного подкрепления при простом восприятии жизненных впечатлений. Это довольно сильное ощущение, часто эзотерически описываемое.

Также человек начинает также лучше замечать (на уровне прямого переживания) механизмы формирования, как позитивного подкрепления, так и равнодушия, вынужденности и т.п.

Как следствие, человек начинает естественным образом стремиться к повышению интенсивности жизненных впечатлений, и уменьшению жизни в состоянии вынужденности и равнодушия.

Предлагаемые режимы позитивного подкрепления не противоречат критическому оценочному мышлению. И даже наоборот – позволяют иметь очень критичное мышление без упадка механизмов подкрепления.

Тогда как часто люди с адекватным видением жизни имеют пониженное позитивное подкрепление, и наоборот, позитивно смотрящие на жизнь люди часто не достаточно критичны.

Поэтому параллельно с медитативными практиками по «некритичному состоянию» рекомендуется развивать разумное понимание чего-либо. На одном позитиве, без развитого разума человек не добьется предельного развития своих способностей, не сможет обеспечить себе больше жизненных возможностей и т.п.

Поэтому и с позиции хорошего позитивного подкрепления, и с позиции открытости системы, и с позиции стремления к знаниям лучшим режимом работы сознания будет интерес.