- •Предисловие
- •Проблема возникновения ощущения1
- •I. Проблема
- •II. Гипотеза
- •Проблемы развития психики2
- •Стадия перцептивной психики
- •Стадия интеллекта
- •Общая характеристика психики животных
- •Законы взаимодействия вида и индивида3
- •Развитие чувствительности4
- •Эволюционные уровни мнемической функции5
- •Основные направления изучения элементов мышления у животных. Экспериментальные модели
- •Изучение способности животных к обобщению и абстрагированию Уровни обобщения и абстрагирования, доступные животным.
- •Признаки, доступные обобщению животных
- •Обобщение абсолютных признаков
- •Естественные стимулы и «естественные» (перцептивные) понятия
- •Выбор стимулов по аналогии
- •Способность животных к символизации
- •Языки животных и язык человека
- •Исследование способности животных к символизации (на примере «счета») с помощью лабораторных тестов
- •Способность к символизации у приматов
- •Возникновение сознания человека7 Условия возникновения сознания
- •К вопросу об эволюции потребностей8
- •Основы зоопсихологии9 Инстинктивное поведение Инстинктивное поведение как основа жизнедеятельности животных
- •Внутренние факторы инстинктивного поведения
- •Внешние факторы инстинктивного поведения
- •Научение Общая характеристика процесса научения
- •Психология размножения и эволюция10 Генезис и эволюция полового инстинкта у животных и человека
- •А. Поиски самок самцами в царстве животных и женщин мужчинами в человеческом обществе. Различие этих исканий между собою и значение этого различия для эволюции культуры
- •Музыка в человеческом обществе как средство овладевания «слабым полом»; ее отличие от музыки животных
- •2) Танцы в человеческом обществе.
- •Определенное материнство
- •Б) Борьба у людей за женщин
- •Генезис и главнейшие этапы эволюции ухода за потомством
- •Эволюция материнского инстинкта у человека и законы, обусловливающие его современное положение у культурных народов
- •Агрессия18 Для чего нужна агрессия
- •Спонтанность агрессии
- •Великий парламент инстинктов
- •Поведенческие аналогии морали
- •Анонимная стая
- •Сообщество без любви
- •Язык и психические представления
- •Невербальная коммуникация у человека
- •Обучение высших обезьян «разговаривать»
- •Истоки человеческого языка
- •Индивидуально-приспособительная деятельность животных22 Ассоциативное обучение, когнитивные процессы
- •Обучение и пластичность
- •Классификация форм индивидуально-приспособительной деятельности
- •Неассоциативное обучение (привыкание)
- •Ассоциативное обучение
- •Классические условные рефлексы
- •Инструментальные условные рефлексы (или обучение методом проб и ошибок)
- •Когнитивные (познавательные) процессы Общая характеристика
- •Латентное обучение
- •Пространственное обучение. Современная теория «когнитивных карт»
- •Обучение «выбору по образцу»
- •Заучивание последовательностей стимулов
- •Инсайт – обучение
- •Не рычите на собаку! о дрессировке животных и людей25
- •Подкрепление: лучше, чем вознаграждение Что такое положительное подкрепление
- •Отрицательное подкрепление
- •Время подачи подкрепления
- •Величина подкрепления
- •Условное подкрепление
- •Режимы подкрепления
- •Исключения из правила вариативного подкрепления
- •Долговременные программы поведения
- •Суеверия: случайные подкрепления
- •Чего можно добиться с помощью положительного подкрепления
- •Самоподкрепление
- •Процесс выработки: формирование высших форм поведения без принуждения и боли Что такое процесс выработки
- •Десять правил выработки
- •Управление с помощью стимулов. Взаимодействие без принуждения
- •Правила управления с помощью стимулов
- •Что может быть сигналом?
- •Интенсивность сигнала и стирание стимулов
- •Применение управления с помощью сигналов
- •Отучение Как использовать подкрепление, чтобы избавиться от нежелательного поведения
- •Подкрепление в повседневной жизни
- •Подкрепление в спорте
- •Подкрепление в бизнесе
- •Подкрепление в мире животных
- •Подкрепление в обществе
Инструментальные условные рефлексы (или обучение методом проб и ошибок)
Начало исследований инструментальных УР связано с именем Э. Торндайка (...), хотя их анализ проводился и в лаборатории И. П. Павлова. <...>
В опытах с «проблемными ящиками» Торндайк наблюдал, как посаженная в ящик кошка ищет выход, пытаясь открыть дверцу разными способами (...) (для этого нужно было нажать на задвижку или потянуть за пружину). Кошка сначала совершает много разных действий (проб), которые в своем большинстве бывают неверными (ошибки), пока случайно не откроет | ящик. При последующих пробах она выходит из ящика все быстрее и быстрее. Конструкция устройства была подсказана Торн-дайку К. Ллойдом-Морганом, наблюдавшим, как его собака манипулирует с задвижкой калитки, чтобы «улизнуть» из дома (...). Такое обучение Торндайк и назвал - «методом проб и ошибок». В дальнейшем обучение животного подобным действиям получило название инструментальных (или оперантных) УР.
Торндайк первым предложил количественную оценку динамики обучения животного инструментальному навыку. Для этого он ввел так называемые «кривые научения».
Между классическими и инструментальными УР существуют определенные различия.
<...>При классических УР временная связь между условным сигналом и безусловной реакцией возникает непроизвольно при действии безусловного раздражителя (подкрепления).
При инструментальных УР подкрепление, например пища, дается только после того, как животное совершает определенное действие, которое не имеет прямой связи с безусловным раздражителем.
<...>К категории инструментальных УР относится формирование навыка нажатия на рычаг (или клевания кнопки) для получения порции пищи. После работ Б. Скиннера этот УР стал основным в исследованиях бихевиористов (анализ связей «стимул-реакция»). К инструментальным УР относится также обучение подопытного животного находить путь к пище или избегать неприятных стимулов в лабиринте. Инструментальным УР является и реакция избегания — навык переходить в тот отсек экспериментальной камеры, где отсутствует болевое подкрепление.
<...>Обширные исследования, выполненные сторонниками идей бихевиоризма, привели к появлению целого ряда новых терминов и понятий и созданию специфического языка для описания закономерностей процесса обучения, обнаруженных только благодаря примененным ими подходам. Многие термины сначала использовались как чисто технические — для объективного описания данных (знакомство с ними может помочь при чтении научных статей бихевиористов). К таким терминам, в частности, относятся:
• оперантное поведение — спонтанные действия, не вызванные каким-либо очевидным стимулом;
• реактивное поведение — всякое поведение, которое совершается в ответ на определенный стимул;
• режим подкрепления (reinforcement schedule): соотношение числа реакций (например, нажатий на рычаг) и вознаграждений (например, кусочков пищи; подробнее см. ниже);
• постоянный (или переменный) интервал (fixed or variable interval) — вознаграждение дается через определенные интервалы времени, в период которых животное может осуществлять двигательные реакции (эти интервалы могут быть постоянными или варьироваться по длительности), но по истечении этого интервала подкрепляется только первая реакция;
• фиксированное (или переменное) соотношение (fixed ratio or variable ratio) — подкрепление дается животному только после того, как оно произведет какое-то количество реакций (нажатий или клеваний). Можно давать подкрепление только после определенного числа реакций (фиксированное соотношение) или это число может каким-то образом варьироваться (переменное соотношение);
• смежность (contiguity) — этим термином обозначают постулируемое возникновение связей между стимулами и возникающими на их основе реакциями, а также совпадение УС с реакцией животного или УС с подкреплением, которое необходимо для возникновения УР;
• ключ (сие) — обычно это либо рычаг, на который нажимает крыса, либо освещенный кружок, по которому наносит удар клювом голубь (этот термин, обычный для работ бихевиористов, не следует путать с термином «ключевой стимул», принятым в этологии для обозначения видоспецифических стимулов, вызывающих инстинктивные реакции)<...>