- •Предисловие
- •Проблема возникновения ощущения1
- •I. Проблема
- •II. Гипотеза
- •Проблемы развития психики2
- •Стадия перцептивной психики
- •Стадия интеллекта
- •Общая характеристика психики животных
- •Законы взаимодействия вида и индивида3
- •Развитие чувствительности4
- •Эволюционные уровни мнемической функции5
- •Основные направления изучения элементов мышления у животных. Экспериментальные модели
- •Изучение способности животных к обобщению и абстрагированию Уровни обобщения и абстрагирования, доступные животным.
- •Признаки, доступные обобщению животных
- •Обобщение абсолютных признаков
- •Естественные стимулы и «естественные» (перцептивные) понятия
- •Выбор стимулов по аналогии
- •Способность животных к символизации
- •Языки животных и язык человека
- •Исследование способности животных к символизации (на примере «счета») с помощью лабораторных тестов
- •Способность к символизации у приматов
- •Возникновение сознания человека7 Условия возникновения сознания
- •К вопросу об эволюции потребностей8
- •Основы зоопсихологии9 Инстинктивное поведение Инстинктивное поведение как основа жизнедеятельности животных
- •Внутренние факторы инстинктивного поведения
- •Внешние факторы инстинктивного поведения
- •Научение Общая характеристика процесса научения
- •Психология размножения и эволюция10 Генезис и эволюция полового инстинкта у животных и человека
- •А. Поиски самок самцами в царстве животных и женщин мужчинами в человеческом обществе. Различие этих исканий между собою и значение этого различия для эволюции культуры
- •Музыка в человеческом обществе как средство овладевания «слабым полом»; ее отличие от музыки животных
- •2) Танцы в человеческом обществе.
- •Определенное материнство
- •Б) Борьба у людей за женщин
- •Генезис и главнейшие этапы эволюции ухода за потомством
- •Эволюция материнского инстинкта у человека и законы, обусловливающие его современное положение у культурных народов
- •Агрессия18 Для чего нужна агрессия
- •Спонтанность агрессии
- •Великий парламент инстинктов
- •Поведенческие аналогии морали
- •Анонимная стая
- •Сообщество без любви
- •Язык и психические представления
- •Невербальная коммуникация у человека
- •Обучение высших обезьян «разговаривать»
- •Истоки человеческого языка
- •Индивидуально-приспособительная деятельность животных22 Ассоциативное обучение, когнитивные процессы
- •Обучение и пластичность
- •Классификация форм индивидуально-приспособительной деятельности
- •Неассоциативное обучение (привыкание)
- •Ассоциативное обучение
- •Классические условные рефлексы
- •Инструментальные условные рефлексы (или обучение методом проб и ошибок)
- •Когнитивные (познавательные) процессы Общая характеристика
- •Латентное обучение
- •Пространственное обучение. Современная теория «когнитивных карт»
- •Обучение «выбору по образцу»
- •Заучивание последовательностей стимулов
- •Инсайт – обучение
- •Не рычите на собаку! о дрессировке животных и людей25
- •Подкрепление: лучше, чем вознаграждение Что такое положительное подкрепление
- •Отрицательное подкрепление
- •Время подачи подкрепления
- •Величина подкрепления
- •Условное подкрепление
- •Режимы подкрепления
- •Исключения из правила вариативного подкрепления
- •Долговременные программы поведения
- •Суеверия: случайные подкрепления
- •Чего можно добиться с помощью положительного подкрепления
- •Самоподкрепление
- •Процесс выработки: формирование высших форм поведения без принуждения и боли Что такое процесс выработки
- •Десять правил выработки
- •Управление с помощью стимулов. Взаимодействие без принуждения
- •Правила управления с помощью стимулов
- •Что может быть сигналом?
- •Интенсивность сигнала и стирание стимулов
- •Применение управления с помощью сигналов
- •Отучение Как использовать подкрепление, чтобы избавиться от нежелательного поведения
- •Подкрепление в повседневной жизни
- •Подкрепление в спорте
- •Подкрепление в бизнесе
- •Подкрепление в мире животных
- •Подкрепление в обществе
Режимы подкрепления
Бытует неправильный взгляд, что если вы начали вырабатывать поведение с помощью положительного подкрепления, то должны продолжать его применение на протяжении всей дальнейшей жизни субъекта, если этого не будет, то поведение исчезнет. Это неверно: постоянное подкрепление необходимо только на стадиях обучения. Вы можете несколько раз вознаградить годовалого ребенка за пользование горшком, но как только поведение заучено, предмет обучения сам о себе позаботится. Мы даем или должны давать начинающему множество подкреплений — обучение ребенка езде на велосипеде идет под настоящий поток: «Правильно, крепче держи руль, у тебя получилось, хорошо!». Но вы будете выглядеть довольно глупо (а ребенок решит, что вы сошли с ума), если вы будете продолжать хвалить его после того, как навык установился. Для того чтобы поддерживать уже выученное поведение на определенном уровне надежности, не только не надо подкреплять его все время, а даже наоборот, следует прекратить регулярные подкрепления и перейти на эпизодическое использование подкрепления, подаваемого в случайном и непредсказуемом порядке. Это и есть то, что психологи называют вариабельным режимом подкрепления. Вариабельный режим гораздо более эффективен для поддержания поведения, чем постоянный, предсказуемый. Один психолог объяснил это мне так: если у вас машина новая и всегда хорошо заводилась, а однажды, когда вы сели в нее, повернули ключ, она не завелась, то вы, может быть, и попробуете завести ее еще несколько раз, но скоро решите, что что-нибудь не в порядке, и позвоните в гараж. Поведение, состоящее в поворачивании ключа, при отсутствии ожидаемого немедленного подкрепления быстро угаснет. С другой стороны, если у вас вместо машины старая консервная банка, которая еще ни разу не заводилась с первой попытки и каждый раз требуется целая вечность для того, чтобы привести ее в движение, вы можете продолжать попытки ее завести в течение получаса; ваше поведение по поворачиванию ключа происходит в низко вероятностном режиме подкрепления и поэтому сильнейшим образом поддерживается. Если давать дельфину рыбку за каждый прыжок, то скоро прыжки станут невысокими, небрежными, лишь бы отделаться. Если теперь перестать давать рыбу, дельфин тут же перестает прыгать. Но если после того, как животное научилось прыгать за рыбку, начать подкреплять первый прыжок, затем третий и так далее наугад, поведение будет поддерживаться на более высоком Уровне: не получив подкрепления, животное станет прыгать чаще, стараясь угадать счастливый номер, и прыжки могут даже усилиться. В свою очередь это позволит подкреплять выборочно наиболее сильные прыжки, — то есть посредством вариативного режима совершенствовать деятельность. Но даже некоторые профессиональные дрессировщики не могут правильно использовать вариативный режим положительного подкрепления; многим эта концепция представляется особенно трудной, не укладывающейся в голове. Нам понятно, что нет нужды продолжать наказывать за неправильное поведение, если оно прекратилось, но почему бы не вознаграждать постоянно за правильное поведение. Мы не так уверены в этом, только когда ставим целью добиться с помощью положительного подкрепления улучшения дисциплины. Действенность вариативного подкрепления лежит в основе всех азартных игр. Если каждый раз, опустив в автомат 5 центов, будете получать десять, то скоро вы потеряете к этому интерес. Да, вы будете делать деньги, но какой это нудный способ! Людям нравится играть с автоматом именно потому, что невозможно предугадать заранее, то ли ничего не получишь, то ли какую-то мелочь, то ли сразу кучу денег, и когда именно будет это подкрепление (это может быть только один самый первый раз). Почему одни люди втягиваются в азартную игру, а другие могут поиграть и бросить, это уже другой вопрос, но для тех, кто попался на крючок, этим крючком стал вариативный режим положительного подкрепления. Чем длительнее интервалы между подкреплениями в вариативном режиме, тем сильнее он стимулирует поведение. Однако режимы с длительными интервалами работают против вас, когда вы пытаетесь угасить поведение. Если поведение не подкреплять совсем, то скоро появится тенденция к его угасанию; но если оно все-таки время от времени подкрепляется — неважно сколь эпизодично — одна сигарета, одна рюмка, одна поблажка ворчуну или нытику — и поведение вместо того, чтобы угасаться, может быть значительно усилено режимом с длительными интервалами между подкреплениями. Всем встречались люди, которые непонятным образом привязаны к супругам или любовникам, которые с ними плохо обращаются. Мы привыкли думать, что так бывает только с женщинами — она чувствует влечение к тому, кто груб, невнимателен, эгоистичен и даже жесток, она его все равно любит, — но это случается и с мужчинами. Каждый знает людей, которые после развода или другого рода утраты одного негодяя находят другого, в точности похожего на предыдущего. Являются ли эти люди вечными жертвами по каким-либо глубоким психологическим причинам? Возможно. Но, может быть, они — жертвы режима с длительными интервалами между подкреплениями? Если вы вступили в связь с очаровательным, обаятельным, интересным в сексуальном плане, веселым и внимательным человеком, а затем он становится все более несговорчивым, даже обидчивым, но все же время от времени проявляет свои хорошие качества, вы станете жить ради этих все более редких моментов, когда вы получаете это прекрасное подкрепление: полное очарования, обаяния, привлекательности и веселья внимание. И парадоксально с точки зрения здравого смысла, но закономерно с точки зрения теории обучения, что чем реже и непредсказуемей становятся такие моменты, тем сильнее становится их подкрепляющий эффект и тем дольше ваша линия поведения будет сохраняться. Кроме того, легко понять, почему человек, однажды оказавшийся в таких отношениях, часто ищет их повторения: ему может казаться, что во взаимоотношениях с нормальным человеком, который сдержан и доброжелателен большую часть времени, не хватает остроты того редкого, страстно желаемого и потому вдвойне действенного подкрепления. Посмотрите на ситуацию с точки зрения человека, управляющего поведением: я могу держать ее (его) в безоговорочном подчинении, так, «чтобы она (он) делала все, что я захочу, ради моего удобства и спокойствия, до тех пор, пока я даю ей (ему) все, что она (он) хочет... изредка». Это один из способов, которыми сутенеры держат в повиновении своих девочек. Конечно, это крепкие путы, но однажды жертва осознает, что сила «очарования», по крайней мере, отчасти, зависит от режима подкрепления, и спокойно уйдет от этого типа отношений и поищет что-то другое.