- •Предисловие
- •Проблема возникновения ощущения1
- •I. Проблема
- •II. Гипотеза
- •Проблемы развития психики2
- •Стадия перцептивной психики
- •Стадия интеллекта
- •Общая характеристика психики животных
- •Законы взаимодействия вида и индивида3
- •Развитие чувствительности4
- •Эволюционные уровни мнемической функции5
- •Основные направления изучения элементов мышления у животных. Экспериментальные модели
- •Изучение способности животных к обобщению и абстрагированию Уровни обобщения и абстрагирования, доступные животным.
- •Признаки, доступные обобщению животных
- •Обобщение абсолютных признаков
- •Естественные стимулы и «естественные» (перцептивные) понятия
- •Выбор стимулов по аналогии
- •Способность животных к символизации
- •Языки животных и язык человека
- •Исследование способности животных к символизации (на примере «счета») с помощью лабораторных тестов
- •Способность к символизации у приматов
- •Возникновение сознания человека7 Условия возникновения сознания
- •К вопросу об эволюции потребностей8
- •Основы зоопсихологии9 Инстинктивное поведение Инстинктивное поведение как основа жизнедеятельности животных
- •Внутренние факторы инстинктивного поведения
- •Внешние факторы инстинктивного поведения
- •Научение Общая характеристика процесса научения
- •Психология размножения и эволюция10 Генезис и эволюция полового инстинкта у животных и человека
- •А. Поиски самок самцами в царстве животных и женщин мужчинами в человеческом обществе. Различие этих исканий между собою и значение этого различия для эволюции культуры
- •Музыка в человеческом обществе как средство овладевания «слабым полом»; ее отличие от музыки животных
- •2) Танцы в человеческом обществе.
- •Определенное материнство
- •Б) Борьба у людей за женщин
- •Генезис и главнейшие этапы эволюции ухода за потомством
- •Эволюция материнского инстинкта у человека и законы, обусловливающие его современное положение у культурных народов
- •Агрессия18 Для чего нужна агрессия
- •Спонтанность агрессии
- •Великий парламент инстинктов
- •Поведенческие аналогии морали
- •Анонимная стая
- •Сообщество без любви
- •Язык и психические представления
- •Невербальная коммуникация у человека
- •Обучение высших обезьян «разговаривать»
- •Истоки человеческого языка
- •Индивидуально-приспособительная деятельность животных22 Ассоциативное обучение, когнитивные процессы
- •Обучение и пластичность
- •Классификация форм индивидуально-приспособительной деятельности
- •Неассоциативное обучение (привыкание)
- •Ассоциативное обучение
- •Классические условные рефлексы
- •Инструментальные условные рефлексы (или обучение методом проб и ошибок)
- •Когнитивные (познавательные) процессы Общая характеристика
- •Латентное обучение
- •Пространственное обучение. Современная теория «когнитивных карт»
- •Обучение «выбору по образцу»
- •Заучивание последовательностей стимулов
- •Инсайт – обучение
- •Не рычите на собаку! о дрессировке животных и людей25
- •Подкрепление: лучше, чем вознаграждение Что такое положительное подкрепление
- •Отрицательное подкрепление
- •Время подачи подкрепления
- •Величина подкрепления
- •Условное подкрепление
- •Режимы подкрепления
- •Исключения из правила вариативного подкрепления
- •Долговременные программы поведения
- •Суеверия: случайные подкрепления
- •Чего можно добиться с помощью положительного подкрепления
- •Самоподкрепление
- •Процесс выработки: формирование высших форм поведения без принуждения и боли Что такое процесс выработки
- •Десять правил выработки
- •Управление с помощью стимулов. Взаимодействие без принуждения
- •Правила управления с помощью стимулов
- •Что может быть сигналом?
- •Интенсивность сигнала и стирание стимулов
- •Применение управления с помощью сигналов
- •Отучение Как использовать подкрепление, чтобы избавиться от нежелательного поведения
- •Подкрепление в повседневной жизни
- •Подкрепление в спорте
- •Подкрепление в бизнесе
- •Подкрепление в мире животных
- •Подкрепление в обществе
Отрицательное подкрепление
Психологи спорят по поводу определения отрицательного подкрепления. Для наших целей отрицательное подкрепление можно определить как то, что субъект будет стараться избегать. Отрицательные подкрепления имеют градации от слегка неприятных стимулов — едва заметный сквозняк от кондиционера в ресторане, который все-таки заставляет вас перейти за; другой столик, — до всевозможных крайностей, например удара электрическим током. Наказание происходит после поведения, на которое оно должно воздействовать. Таким образом, вы не можете избежать наказания, изменив взгляды или поступки, так как неправильное поведение уже осуществилось. Малыш, которого отшлепали за плохой табель успеваемости, может в дальнейшем учиться лучше или хуже, но уже не сможет изменить того табеля, который он уже принес. Напротив, отрицательное подкрепление можно остановить или избегнуть сиюминутным изменением поведения. Допустим, сидя в гостиной у тетушки, я случайно положила ноги на кофейный столик. Тетушка неодобрительно поднимает брови. Я ставлю ноги на пол. Ее лицо мягчяет. Я чувствую облегчение. И поскольку я смогла остановить сигнал нерасположенности, совершившееся поведение было подкреплено. Я усвоила: в тетушкином доме держи ноги подальше от мебели. Поведение может быть полностью сформировано на основе отрицательного подкрепления, как в большинстве случаев традиционной дрессировки животных: лошадь учится поворачивать налево, когда тянут за левый повод, потому что поворот прекращает неприятное давление; лев вспрыгивает на тумбу, чтобы избежать назойливого хлыста или острой палки, которые держат около его морды. В общем, термин «подкрепление» в этой книге относится к положительному подкреплению; если я захочу обсудить отрицательное подкрепление, я оговорю это особо. Вообще же оба вида подкрепления подчиняются одинаковым правилам применения.
Время подачи подкрепления
Как уже говорилось, подкрепление должно совершаться в связи с действием, которое предполагается видоизменить. Подкрепление — это информация. Оно говорит субъекту, что именно вам нравится. Когда субъект пытается обучиться, информационное содержание подкрепления становится важнее самого подкрепления. В тренировке спортсменов или при обучении танцоров именно восклицания инструктора «Да!» или «Хорошо!», отмечающие нужное движение, а не разбор тренировки или репетиции в раздевалке, дают требующуюся информацию. Запоздалое подкрепление является наибольшим недочетом начинающего дрессировщика. Собака садится, но к тому времени, когда хозяин говорит: «Хорошая собака», собака уже снова стоит. За что, думает животное, его хвалят? За то, что оно встает. Мы всегда слишком запаздываем, подкрепляя друг друга. «Послушай, дорогая, вчера вечером ты выглядела замечательно», — звучит совсем не так, как та же фраза, сказанная вовремя. Отсрочка подкрепления может даже оказать вреднее воздействие («А что, разве я сейчас не выгляжу замечательно?»). Мы свято верим, что сила слов перекроет ошибки во времени подкрепления. Слишком раннее подкрепление тоже неэффективно. В зоопарке Бронкса служители замучились с гориллой. Им было нужно, чтобы она выходила в вольер, чтобы можно было почистить внутреннюю клетку, но она взяла манеру сидеть в дверном проеме, и, обладая недюжинной силой, не давала закрываться скользящей двери. Когда же служители клали пищу снаружи или подманивали ее бананами, горилла либо не обращала на них внимания, либо хватала пищу и бежала обратно к своей двери, прежде чем ту успевали закрыть. Дрессировщика, работавшего при зоопарке, попросили разобраться. Он объяснил служителям, что размахивание бананами и подбрасывание пищи, было, попыткой подкрепить действие, которое еще не совершилось. Это называется взяточничеством. Надо было не замечать животное, пока оно сидело в дверях, но подкреплять пищей, если оно выйдет оттуда самостоятельно. Проблема была решена.
Мне кажется, что иногда и детей мы подкрепляем слишком рано, находясь под ложным впечатлением, будто мы их подбадриваем («Молодец, хорошо, ты уже почти все сделала правильно»). Возможно, при этом мы подкрепляем попытки. Но существует разница между попыткой сделать что-то и выполнением этого. Причитания типа «я не могу» иногда отражают фактическое положение вещей, но они могут являться и признаками того, что часто подкреплялись просто попытки. Вообще, подкрепление поведения, которое еще не совершилось, — подарками, обещаниями, комплиментами или чем-нибудь в этом роде — ни капельки не подкрепляет это поведение. Если что-то и подкрепляется, так это поведение, совершающееся в данное время: вероятнее всего — выпрашивание подкрепления. Соблюдение времени очень важно и при обучении с отрицательным подкреплением. Лошадь учится поворачивать налево, когда тянут за левый повод, но только если после поворота натяжение ослабевает. Прекращение натяжения является подкреплением. Вы садитесь на лошадь, пришпориваете ее, и она движется вперед — тогда вам надо перестать ее пришпоривать (если, конечно, вы не хотите, чтобы она двигалась быстрее). Начинающие наездники часто тычут лошадь в бока непрерывно, как будто шпоры это своего рода педаль газа в автомобиле, необходимая для движения. Пришпоривание не прекращается и тем самым не несет никакой информации для лошади. Так в школах верховой езды появляются лошади с железными боками, которые передвигаются черепашьим шагом независимо от того, как часто их пришпоривают.
То же происходит и с людьми, к которым постоянно придираются и бранят родители, начальство или учителя. Если отрицательное подкрепление не прекращается в момент достижения желаемых результатов, то оно не является подкреплением и не несет информации. Оно становится как буквально, так и в терминах теории информации «шумом».
Когда я смотрю по телевизору футбол или бейсбол, я всегда поражаюсь замечательной своевременности подкреплений, вновь и вновь получаемых игроками. Как только забивают гол или бегун пересекает финишную линию, рев толпы сигнализирует полное одобрение; а только посмотрите на бешеный обмен взаимоподкреплений игроков в тот момент, когда счет открыт или игра выиграна. С артистами, особенно с киноактерами, дело обстоит совершенно иначе. Даже на сцене аплодисменты раздаются после того, как работа кончается. У артистов кино не существует своевременного подкрепления, за исключением редкого отзыва режиссера или оператора об их работе или рукопожатия; письма поклонников и положительные рецензии, приходящие спустя недели и месяцы, бледнеют в сравнении с неистовством американского стадиона в минуту успеха. Нет ничего удивительного, что некоторые звезды кино проявляют болезненную страсть к низкой лести и сенсациям; работа может совершенно не удовлетворять, если подкрепления, даже самые блестящие, всегда опаздывают.