Общие принципы планирования экспериментов

Сравнение.

Рандомизация.

Репликация.

Однородность.

Стратификация.

уровнями фактора


Название: Общие принципы планирования экспериментов
Детальное описание:

С момента своего появления наука ищет пути к познанию законов окружающего мира. Совершая одно открытие за другим, ученые поднимаются все выше и выше по лестнице знания, стирая границу неизвестности и выходя на новые рубежи науки. Этот путь лежит через эксперимент. Сознательно ограничивая бесконечное разнообразие природы искусственными рамками научного опыта, мы превращаем его в понятную для человеческого разума картину мира.

Эксперимент как научное исследование - это форма, в которой и посредством которой наука существует и развивается. Эксперимент требует тщательной подготовки перед его проведением. В биомедицинских исследованиях планирование экспериментальной части исследования имеет особенно большое значение по причине широкой вариабельности свойств, характерной для биологических объектов. Эта особенность является основной причиной трудностей при интерпретации результатов, которые могут значительно различаться от опыта к опыту.

Статистические проблемы обосновывают необходимость выбора такой схемы эксперимента, которая минимизировала бы влияние вариабельности на выводы ученого. Поэтому цель планирования эксперимента заключается в создании схемы, которая необходима для получения как можно большей информации при наименьших затратах для выполнения исследования. Более точно планирование эксперимента можно определить как процедуру выбора числа и условий проведения опытов, необходимых и достаточных для решения поставленной задачи с требуемой точностью.

Планирование эксперимента появилось в агробиологии и связано с именем английского статистика и биолога сэра Рональда Эйлмера Фишера. В начале XX века на агробиологической станции в Ротамстеде (Великобритания) начались исследования влияния удобрений на урожайность различных сортов зерновых. Ученые вынуждены были считаться как с большой изменчивостью объектов исследования, так и с большой продолжительностью опытов (около года). В этих условиях не было иного пути, кроме разработки продуманного плана эксперимента для уменьшения негативного влияния указанных факторов на точность выводов. Применив статистические знания к биологическим проблемам, Фишер пришел к разработке собственных принципов теории статистического вывода и положил начало новой науке о планировании и анализе экспериментов.

Сам Рональд Фишер объяснял основы планирования на примере эксперимента произведенного для выяснения способности некой английской леди различать, что было налито в чашку в первую очередь - чай или молоко. Следует отметить, что для настоящих английских леди важно, чтобы чай наливался в молоко, а не наоборот, нарушение последовательности будет признаком невежества и испортит вкус напитка.

Эксперимент проходит просто: леди пробует чай с молоком и по вкусу пытается понять, в какой очередности были налиты оба ингредиента. План, разработанный для этого исследования, характеризуется рядом свойств.

Сравнение. Во многих исследованиях точное определение результата измерения затруднительно или невозможно. Так, например, леди не сможет количественно оценить качество чая, она будет сравнивать его с эталоном правильно приготовленного напитка, вкус которого знаком ей с детства. Как правило, в научном эксперименте объект сравнивается либо с неким заранее заданным стандартом, либо с контрольным объектом.

Рандомизация. Это очень важный момент в планировании. В нашем примере рандомизация относится к тому, в каком порядке представлять чашки на дегустацию. Рандомизация необходима для того, чтобы стало возможным применение статистических методов для анализа результатов исследования.

Репликация. Повторяемость - это необходимый компонент постановки эксперимента. Недопустимо делать выводы о способности к определению качества чая только по одной чашке. Результат каждого отдельного измерения (дегустации) несет в себе долю неопределенности, возникшей под влиянием множества случайных факторов. Следовательно, для выявления источника вариабельности необходимо провести несколько испытаний. С этим свойством связана чувствительность эксперимента. Фишер отмечал, что пока число чашек чая не превысит некоторого минимума, невозможно сделать какие-либо однозначные выводы.

Однородность. Несмотря на необходимость повторения измерений (репликация), их число не должно быть слишком велико, чтобы не утратилась однородность. Разность температур чашек, притупление вкуса и т. п. при превышении некоторого предельного числа повторений, могут затруднить анализ результатов эксперимента.

Стратификация. Выходя за рамки примера Р. Фишера к более абстрактному описанию экспериментального плана можно дополнительно указать такое свойство как стратификация (блокировка). Стратификация - это распределение экспериментальных единиц в относительно однородные группы (блоки, слои). Процедура стратификации позволяет минимизировать эффект известных нам неслучайных источников вариабельности. Внутри каждого блока ошибку эксперимента предполагают меньшей относительно варианта со случайным отбором для эксперимента такого же количества объектов. Например, при исследовании нового лекарственного препарата мы имеем два уровня фактора - «препарат» и «плацебо», которые назначаются мужчинам и женщинам. В данном случае пол - это блокирующий фактор, по которому происходит разделение исследуемых на подгруппы.

Описанные выше характеристики экспериментального плана полностью или частично относятся к любому научному эксперименту. Однако для начала работы недостаточно одного только знания об общих свойствах исследования, необходима более тщательная подготовка. Создание подробного руководства в рамках одной статьи невозможно, поэтому здесь будет изложена наиболее общая информация об этапах планирования эксперимента.

Любое исследование начинается с постановки цели. Выбор проблемы для изучения и ее формулировка повлияют как на дизайн исследования, так и на выводы, которые будут сделаны по его результатам. В самом простом случае формулировка проблемы должна предполагать вопросы «Кто?», «Что?», «Когда?», «Почему?» и «Как?».

В качестве иллюстрации важности данного этапа планирования можно привести исследование, в котором проводится сбор информации о дорожно-транспортных происшествиях. В зависимости от постановки цели, работа может быть направлена на разработку нового автомобиля либо нового дорожного покрытия. Несмотря на то, что используется один и тот же набор данных, постановка задачи и выводы существенно различаются в зависимости от формулировки проблемы.

После выбора цели работы следует определить так называемые зависимые переменные. Это переменные, которые будут измеряться при проведении исследования. Например, показатели функционирования тех или иных систем организма человека или лабораторных животных (частота сердечных сокращений, артериальное давление, содержание ферментов в крови и т. п.), а также любые другие характеристики объектов исследования, изменение которых будет для нас информативно.

Поскольку есть зависимые переменные, то должны быть еще и независимые переменные. Другое их название - факторы. Факторами исследователь оперирует в эксперименте. Это может быть доза исследуемого препарата, уровень стресса, степень физической нагрузки и т. д. Взаимосвязь между фактором и зависимой переменной удобно представлять с помощью кибернетической системы, часто называемой «черный ящик».

Черный ящик - это система, механизм работы которой нам неизвестен. Однако исследователь имеет информацию о том, что происходит на входе и выходе черного ящика. При этом состояние выхода функционально зависит от состояния входа. Соответственно y1, y2, ..., yp - это зависимые переменные, величина которых зависит от факторов (независимых переменных x1, x2, ..., xk). Параметры w1, w2, ..., wn представляют собой возмущающие воздействия, не поддающиеся контролю или изменяющиеся со временем.

В общем виде это можно записать так: y=f(x1, x2, ..., xk).

Каждый фактор в опыте может принимать одно из нескольких значений. Такие значения называют уровнями фактора . Может оказаться, что фактор способен принимать бесконечное число значений (например, доза лекарственного препарата), однако на практике выбирается несколько дискретных уровней, количество которых зависит от задач конкретного опыта.

Фиксированный набор уровней факторов определяет одно из возможных состояний черного ящика. Вместе с тем, это есть условия проведения одного из возможных опытов. Если перебрать все возможные наборы таких состояний, то мы получим полное множество различных состояний данной системы, количество которых будет числом всех возможных экспериментов. Для того, чтобы вычислить количество возможных состояний, достаточно число уровней факторов q (если для всех факторов оно одинаково) возвести в степень количества факторов k.

Совокупность всех возможных состояний определяет сложность черного ящика. Так, система из десяти факторов на четырех уровнях может находиться более чем в миллионе разных состояний. Очевидно, что в подобных случаях невозможно провести исследование, включающее все возможные опыты. Поэтому на этапе планирования решается вопрос о том, сколько опытов и каких именно необходимо провести для решения поставленной задачи.

Следует отметить, что свойства объекта исследования имеют существенное значение для эксперимента. Во-первых, нам надо иметь информацию о степени воспроизводимости результатов опытов с данным объектом. Для этого можно провести эксперимент, а затем повторить его через неравные промежутки времени и сравнить результаты. Если разброс значений не превышает наших требований к точности эксперимента, то объект удовлетворяет требованию воспроизводимости результатов. Другое требование к объекту - его управляемость. Управляемым считается объект, на котором можно провести активный эксперимент. В свою очередь, активный эксперимент - это такой эксперимент, в процессе которого исследователь имеет возможность выбора уровней факторов, представляющих для него интерес.

На практике не существует полностью управляемых объектов. Как уже говорилось выше, на реальный объект действуют как управляемые, так и неуправляемые факторы, что приводит к вариабельности результатов между отдельными объектами. Отделить случайные изменения от закономерных, вызванных различными уровнями независимых переменных, мы можем лишь с помощью статистических методов.

Но статистические методы эффективны лишь в определенных условиях. Одно их таких условий - это требование некоего минимального размера выборок, используемых в проведении эксперимента. Очевидно, что чем шире диапазон изменения признаков от объекта к объекту, тем больше должна быть повторность опыта, т. е. численность экспериментальных групп.

Поскольку, неоправданно большое число испытаний сделает исследование слишком дорогим, а недостаточный объем выборки может поставить под сомнение точность выводов, определение необходимого объема выборок играет решающую роль в планировании эксперимента. Методы вычисления минимального объема выборок подробно описаны в специальной литературе, поэтому привести их в статье не представляется возможным. Тем не менее, следует упомянуть, что они требуют предварительного определения средней величины исследуемого показателя и ее ошибки. Источником такой информации могут послужить публикации о похожих исследованиях. Если они еще не проводились, то возникает необходимость в выполнении предварительного «пилотного» исследования для оценки вариабельности признака.

Следующий этап в планировании экспериментов - это рандомизация. Рандомизация представляет собой процесс используемый для группировки объектов таким образом, чтобы у каждого из них была равная вероятность попасть в контрольную или опытную группу. Другими словами, выбор участников исследования должен происходить случайно, чтобы исследование не было отклонено в сторону «предпочтительного» для исследователя результата.

Рандомизация помогает предотвратить смещения, обусловленные причинами, которые не были непосредственно учтены в плане эксперимента. Для этого, например, формирование экспериментальных групп лабораторных животных производится случайным образом. Однако полная рандомизация возможна далеко не всегда. Так, в клинических исследованиях принимают участие пациенты определенной возрастной группы, с заранее заданным диагнозом и тяжестью заболевания, а, следовательно, отбор участников не является случайным. Кроме того, ограничивают рандомизацию так называемые «блочные» планы экспериментов. Эти планы подразумевают, что отбор в каждый блок выполняется в соответствии с определенными неслучайными условиями, а случайный отбор объектов исследования возможен только внутри блоков. Процесс рандомизации легко осуществить с помощью специализированного статистического программного обеспечения или специальных таблиц.

В заключение необходимо сказать о необходимости учета в плане исследования помимо требований медицины и статистики еще и морально-этических норм. Не стоит забывать о том, что не только люди, но и лабораторные животные должны вовлекаться в эксперимент в соответствии с этическими принципами.


1. Сформулированные гипотезы не отражают проблемных ситуаций, существенных зависимостей в изучаемом объекте.

2. К неверной эмпирической интерпретации переменных, к выбору неадекватных показателей.

3. Были допущены ошибки при формировании экспериментальных и контрольных групп. В ходе эксперимента обнаружилось значитльное различие групп, что вызвало сомнение в возможности сравнивать эти группы по составу переменных.

4. Для экспериментальной В качестве независимой переменной выделен фактор, который не может быть причиной, устойчивой детерминантой процессов, происходящих в изучаемом явлении.

5. Связи между зависимой и независимой переменными имеют случайный характер. Неправильно установлена структура переменных.

6. Допущены ошибки в предварительном описании объектов, что привело группы трудно подобрать контрольную.

7. Не поддается нейтрализации действие побочных факторов, трудно создать экспериментальную ситуацию.

8. Не обеспечен достаточный уровень измерения и контроля за состоянием переменных.

9. При анализе данных использовался логико-математический аппарат, который неприменим к изучаемому классу явлений.

10. При анализе результатов эксперимента социолог переоценивает воздействие независимой на зависимую переменную, недоучитывает влияния ряда случайных факторов на изменения в экспериментальной ситуации.

11. Среди организаторов экспериментальных работ оказались люди, не заинтересованные в положительных результатах эксперимента.

12. В ходе эксперимента возникли конфликты среди участников по поводу участия в эксперименте.

13. Коллектив отказывается принять участие в эксперименте, мотивируя свой отказ тем, что ранее уже приходилось участвовать в эксперименте, и ничего, кроме лишних забот, это участие не принесло.



Как пишет Дж.Дж. Дэвис, рекламисты проводят эксперименты для того, чтобы определить, каким образом различные действия («независимые переменные») отражаются на отношении, мнении и поведении потребителей (зависимые переменные). Эксперименты помогают им найти ответы на вопросы, касающиеся внедрения нового товара, его упаковки, содержания рекламы, набора средств рекламы и затрат на рекламу. Вообще многие исследовательские методы являются чисто описательными (например, метод наблюдения, разобранный ранее). Они дают возможность сделать «моментальный снимок» ситуации на рынке. «Однако случается так, что людям, принимающим решения в рекламном бизнесе, требуется не только описание. Возникают ситуации, когда необходимо понять, как происходящие изменения условий рекламирования, структуры товара и его мета на рынке влияют на формирование отношения, мнения и поведения или на позиционирование товара на рынке. Выяснить это можно с помощью экспериментальных исследований, в процессе которых исследователь изменяет или преобразует что-либо в окружении потребителя или товара с целью узнать, что произойдет». Итак, данный метод предполагает изменения одного или нескольких параметров и контроль за изменением других параметров, зависимых от первых. В ходе эксперимента исследователь пытается выяснить причинно -следственные связи между разными факторами, влияющими на события, факты, явления, процессы.

С точки зрения С.В. Веселова, применительно к рекламной деятельности это может быть все, что угодно, например, определение степени воздействия на эффективность рекламной кампании изменения рекламной продукции или размещения рекламы по сравнению с предыдущей рекламной кампанией, или различия восприятия целевой аудиторией в случае замены в рекламном ролике одного актера другим (варианты – замена слогана, стиля рекламной кампании, дизайна объявления и др.), или выбор медиаканала среди нескольких, или степень влияния интенсивности рекламы на продажи рекламируемой продукции и т.д. Например, если имеется два ТВ-ролика для одной кампании, то проводится эксперимент в разных вариантах:

1) используется ролик А;

2) используется ролик Б;

3) используются сразу оба ролика А и Б. Последующее сравнение полученных результатов позволяет сделать выводы о реальном выборе приоритетов.

Составляющие эксперимента:

1) зависимая переменная – это то, что исследователь пытается объяснить; это критерий, используемый для того, чтобы оценить влияющее воздействие независимой переменной (например, поведение и отношение при покупке товара); это фактор, который изменяется под влиянием другого фактора. Таким образом, зависимая переменная – это фактор, изменение которого определяется независимой переменной.

2) независимая (экспериментальная) переменная – это то, что исследователь использует для объяснения наблюдаемых (в ходе эксперимента) изменений зависимой переменной; это то, что изменяется в ходе эксперимента, чтобы повлиять на изменение зависимой переменной (эффект). Независимая переменная (в отношении к зависимой переменной) – показ рекламы. Независимая переменная, должна выбираться таким образом, чтобы ее легко можно было наблюдать или измерять численное фиксирование интенсивности. В эксперименте искусственно изменяется только независимая переменная, а зависимая переменная изменяется уже как отклик (следствие, последствие). Таким образом, переменная, направление или интенсивность действия, которой определяются социологом в соответствии с заранее разработанной программой, называется управляемой (контролируемой) переменной. Например, изменяя количество экспонируемой рекламы, мы узнаем, насколько это влияет на осведомленность о ней или припоминание рекламного сообщения.

Механизм эксперимента:

Выявляя взаимодействие зависимой и независимой переменных, мы выявляем причинно-следственные связи: манипулирование независимой переменной («причина») приводит к изменениям зависимой переменной («следствие»), что позволяет нам делать соответствующие выводы (известно, что одни факторы действуют сильнее, чем другие; одни – напрямую, другие – косвенно и т.д.). В любом случае, исследователь рекламы манипулирует в эксперименте и наблюдает за воздействием одной, двух и более независимых переменных.

Критерии установления причинно-следственной связи:

1. События должны происходить в соответствующем порядке (манипулирование с независимой переменной должно предшествовать оценке результатов). Можно спутать причину со следствием. Например, Вы увеличили количество рекламных сообщений à увеличилась осведомленность потребителей (Ваши измерения это зафиксировали) à одновременно повысилось число покупающих рекламируемый товар. С одной стороны, причинно-следственный ряд выглядит именно так. Но ведь можно предложить и другое объяснение одновременности всех этих событий: люди сначала приобрели товар, а уже затем стали обращать больше внимания на рекламу данного товара.

2. Причина должна быть статистически связана с эффектом (следствием): причина и следствие должны происходить или сменять друг друга в одно и то же время.

3. Альтернативные объяснения должны быть сведены к минимуму. Этот критерий напрямую влияет на внутреннюю валидность эксперимента. Обычно строгая последовательность и согласованность действий эксперимента исключают альтернативные толкования. Однако всегда есть несколько факторов, влияющих на валидность. Уровень валидности влияет на степень уверенности исследователя в существовании причинно-следственной связи между экспериментальным манипулированием (с независимой переменной) и результатами эксперимента. Обычно уровень валидности уменьшается (может понизиться) вследствие следующих «угроз»: собеседования с респондентами накануне эксперимента или в начале эксперимента сказывается на восприятии и поведении испытуемых, влияние фона (Вы хотите узнать реакцию потребителей безалкогольных напитков на новую рекламу, а тестируете ее в очень жаркую или холодную погоду – искажение обычного), инструментальная погрешность (в ходе эксперимента поменяли метод фиксации данных и теперь невозможно понять, чему приписать происходящие изменения в поведении респондентов – изменению независимой переменной или изменению методов записи, способов сбора данных), неправильная выборка контрольной или экспериментальной групп респондентов и др.

Для повышения качества проведения эксперимента обычно задействуют, по крайней мере, две отдельные группы респондентов:

1) контрольная группа, члены которой не подвергаются экспериментальному манипулированию, служит основой для сравнения с данными по экспериментальной группе;

2) экспериментальная группа, членам которой, например, не только предъявляют ТВ-ролик, но и создают иные условия восприятия рекламного сообщения, или включают в ТВ-ролик элементы изменений и т.д.

Один из способов тестирования радио- и телевизионных рекламных роликов (который связан со способами прогнозирования, которые обсуждались в предыдущих главах) – это тест Шверина. Тест заключается в том, что потенциальному покупателю предоставляется возможность выбрать из списка товар одной из марок в качестве приза. После того как этим людям показали рекламу, их снова просят выбрать товары из того же списка. Любые изменения в выборе марки будут отнесены на счет рекламы. Используется также специальный трейлер, куда покупатели из универмага приглашаются для просмотра рекламы, а затем у них берется интервью об их реакции на нее. Что касается рекламы в печати, то среди ряда случайно выбранных домов могут быть распространены рекламные журналы. Домохозяек различными способами уговаривают посмотреть журналы и затем описать свою реакцию на рекламу.

Целями метода экспериментальной аудитории могут являться: моделирование поведения потенциальных потребителей в ситуации свободного выбора; выявление особенностей восприятия рекламной продукции; изучение стереотипов индивидуального сознания. Для сравнительного эксперимента отбираются несколько групп потребителей. Далее выявляются изменяющиеся и постоянные категории в продукте или в поведении испытуемых и выбираются методы фиксации динамики переменных (это могут быть методы объективной регистрации функционального состояний человека, такие как КГР, миограмма, метод вызванных потенциалов, а также устные отчеты испытуемых или результаты наблюдения экспериментатора). Здесь важен выбор метода анализа полученных экспериментальных данных и их интерпретация.

Дж.Дж. Дэвис приводит следующий пример факторного плана эксперимента. Факторный план – это экспериментальный метод, измеряющий одновременно воздействие двух или более независимых переменных (каждая из которых имеет несколько уровней) на одну или несколько зависимых переменных. Факторные планы рассматривают главные эффекты и взаимодействия. Главный эффект – отдельное воздействие каждой независимой переменной на зависимую переменную. Была задумана рекламная кампания, договорились обо всем, но два вопроса «зависли»: кто будет представлять кампанию в ТВ-ролике (простой человек или знаменитость) и каким должен быть тон (манера) подачи ролика.

Появились следующие цели экспериментального исследования: Какой эффект вызовет замена «представителя» компании (знаменитость-обыкновенный человек)? Каков эффект будет от изменения тона (манеры) подачи ролика? Каков будет эффект от одновременной замены того и другого? В данном примере главными эффектами являются: 1) представитель компании (два уровня: знаменитость или обыкновенный человек) и тон (два уровня: юмористический или серьезный). Следствием комбинированного действия независимых переменных на зависимую переменную будет их взаимодействие. Взаимодействие имеет место тогда, когда совокупный эффект (эмерджентной) двух или нескольких независимых переменных отличается от арифметической (механической) суммы и независимых эффектов. (Третий вопрос – цели эксперимента). Два эксперимента отобрали по случайному признаку выборку в 240 человек. Разделили их на 4 группы по 60 человек; каждому из респондентов показали один рекламный ролик. Получилось следующее распределение (факторы и количество респондентов в одной ячейке таблицы):

Респондентам, «попавшим» в верхнюю левую ячейку, демонстрируют забавную рекламу с участием знаменитости, в нижнюю правую – серьезную рекламу с участием обычного человека. После просмотра ТВ-ролика все данные (зафиксированные реакции респондентов – зависимая переменная) усредняются (степень убедительности в среднем по каждому фактору):

Таким образом, статистический анализ полученных данных зафиксировал, что ни один из главных эффектов не является значимым (2,4 ~ 2,1 и 2,2 ~ 2,1). Вместе с тем, данные засвидетельствовали о значительном эффекте взаимодействия (2,7 значительно больше всех остальных вариантов). Отсюда общий вывод: сами по себе (независимо друг от друга) участие того или иного представителя (хоть знаменитость, хоть простой человек) и тон ТВ-ролика (юмор или серьезность) не влияют на убедительность рекламного сообщения, однако совместно оба этих фактора способны оказать значительное влияние.

А. Кутлалиев и А. Попов приводят пример CFX (Controlled Field experiment – управляемый полевой эксперимент), который считается наиболее надежным методом определения рекламного бюджета.

Схема возможного эксперимента CFX (этапы, виды работ):

1) основная независимая переменная – расходы на рекламу;

2) основная зависимая переменная – объем продаж;

3) дополнительные зависимые переменные – осведомленность, знания, отношение, намерения купить товар и др.;

4) время воздействия независимой переменной – 12 месяцев (эффект влияния рекламы проявляется в течение нескольких месяцев, поэтому планирование эксперимента надо начинать задолго до утверждения рекламного бюджета);

5) интервал измерений – 14 месяцев (кроме того, желательно иметь в своем распоряжении временные ряда продаж для вычисления трендов и сезонности);

6) количество субъектов УПЭ – 5-10 локальных рынков на один уровень рекламного бюджета (локальный рынок областного центра Тверь является сам город и 20-30-километровая зона вокруг него);

7) не менее 3 уровней управления бюджетом – например, 75%, 100% (контрольный), 150%;

11) влияние на различные рынки (Москва – СПб, города-миллионники, областные центры, рынки с разным потребительским потенциалом и т.д.);

Надо отметить, что эксперимент широко применяется в психологии рекламы. Вот несколько примеров.

Модель идеального рекламного объявления. В 1997 г. в Психологическом агентстве рекламных исследований (ПАРИ) была предпринята попытка разработать модель «психологически идеального рекламного объявления». Для этого были использованы 100 одинаковых номеров популярной в то время рекламной газеты «Экстра М» (99 страниц текста) и задействовано 100 испытуемых. Эксперимент предполагал изучение произвольного и непроизвольного восприятия (также – памяти и внимания). Все рекламные объявления были пронумерованы и на первом этапе исследования испытуемых просили: пролистывая газету с определенной скоростью, указывать те объявления, которые привлекли их внимание в первую очередь. Затем испытуемым предлагалось найти некоторые небольшие объявления на отдельных страницах, но подробно описывать только те, которые непроизвольно бросались в глаза. Результат: наиболее эффективным оказалось объявление строго определенного вида: это небольшой текст с графикой, занимавший примерно 1/4-1/8 всего рекламного модуля, окруженный пустым белым незаполненным полем. Кстати, рекламодатели, которым предлагалось разместить подобные объявления, крайне негативно отнеслись к подобным «малоубедительным» предложениям; к тому же они не хотели «платить деньги за пустоту, но хотели «сэкономить деньги». Еще один важный аспект: рекомендуемые объявления встречались на страницах газеты довольно редко, но если бы они стали появляться достаточно часто, то – по законам восприятия – рано или поздно психологический эффект от подобных моделей оказался бы нулевым. Тем самым, следует всемерно подчеркивать не только необходимость фундаментальных исследований, но и важность краткосрочных исследований, которые фиксируют status quo и позволяют правильно сориентироваться в постоянно изменяющейся маркетинговой среде.

Исследование особенностей внушения в телерекламе. В 1997 г. в Психологическом агентстве рекламных исследований Д.А. Судак изучал динамику и некоторые особенности внушения в виде многократно и непрерывно повторяющейся рекламы. В качестве стимульного материала группам испытуемых непрерывно предъявлялись два рекламных ролика с высокой (реклама шоколада «Шок» – одной группе) и низкой (реклама сыра «Фейндейл» – другой группе) динамикой (скорость смены кадров, темп речи диктора и проч.). Сравнивались результаты объективных эффектов (кожно-гальваническая реакция по методу В.В. Суходеева). Выявилось: ролик с низкими динамическими характеристиками вызывал у испытуемых эмоциональное пресыщение лишь после 7-8 предъявлений стимульного материала, тогда как в случае с роликом с высокими динамическими характеристиками оно появлялось уже на 3-4 раз. При этом после проведения эксперимента испытуемые обеих групп не отмечали никакого аппетита, наоборот, предъявление роликов выше определенной нормы начинало вызывать раздражение, вербальную агрессию, усталость, отвращение. Был сделан вывод: многократное и непрерывное предъявление различных рекламных видеороликов выше некоторой нормы не обеспечивает искомого психологического эффекта, а наоборот – вызывает защитную реакцию и даже отторжение. Экономический же эффект воздействия роликов (при их многократной демонстрации) проявляется в феноменах другого порядка: расширяется заинтересованная аудитория, увеличивается запоминаемость и последующее воспоминание и др.

Изучение метода убеждения в рекламе. В 1998 г. в Психологическом агентстве рекламных исследований О.Н. Попова провела эксперимент с целью проверки гипотезы: какие телеролики (непосредственно обращенная зрителю или подаваемая в виде диалога персонажей друг с другом) обладают большим убеждающим эффектом. Была сконструирована батарея роликов, основанных на монологах и диалогах (по 5 роликов для каждой ситуации). Двум группам испытуемых по 30 человек предъявлялись стимульные материалы первой и второй категории. Оценка роликов проводилась по методике семантического дифференциала. Исследование показало, что из 15 оцениваемых характеристик 70% положительных оценок получили материалы, основанные на диалогах. Они представляются испытуемыми менее навязчивыми, более убедительными, понятными, интересными, оригинальными, энергичными, правдивыми. Вывод: реклама, основанная на прямом обращении к зрителю, стремящаяся убедить его в необходимости приобрести товар, может оцениваться намного ниже, чаще отторгается зрителем.

Моделирование технологии «25 кадра». Л. Волкова и С. Сергеев в 1998 году исследовали механизм восприятия зрителями скрытой информации. Двум группам испытуемых предлагался сюжет (20 сек.) с изображением морского пейзажа на фоне восходящего солнца. При этом одной из групп при показе сюжета вставлялась вставка по технологии «25 кадра» абстрактной фигуры, символизирующей название турфирмы, и бессмысленного слова («КИТАН», «ФАТУР» и под.), символизирующего название этой турфирмы. Вставки (логотип и название) предъявлялись на очень короткое время в середине сюжета. После просмотра участники эксперимента выполняли два задания: выбирали из 8 названий одно, из 8 логотипов один (по мнению испытуемых наиболее подходящих турфирме). Результат: первая группа испытуемых, которым был предъявлен сюжет без вставок, выбирали логотип и слово практически в случайном порядке; вторая группа испытуемых в массе некоторой своей части выбрали именно стимульные логотип и слово (или похожие на них). Вывод: вставки типа «25 кадр» определенным образом влияют на зрителя, но только – на мотивацию выбора; они воспринимаются в качестве некоей подсказки, но – не способны напрямую воздействовать на волю зрителя; в основном, зависимы от подобных подсказок те люди, которые имеют проблемы в области самостоятельного принятия решений.

Приложение 1

К.А. Джафаров. Курс лекций «Исследования в рекламе »

Характерные особенности проведения эксперимента. Каждый эксперимент состоит из четырех основных этапов: определить, что именно необходимо узнать, предпринять соответствующие действия (провести эксперимент), наблюдать эффект и последствия этих действий на другие переменные, определить, в какой мере наблюдаемый эффект может быть обусловлен предпринятыми действиями.

Составляющие эксперимента . По крайней мере, должны быть одна зависимая переменная, одна независимая переменная и манипулирование. Зависимая переменная - то, что исследователь пытается объяснить. Независимая переменная - то, что используется для объяснения изменений зависимой переменной. Манипулирование – изменение значений независимой переменной.

Требования к установлению причинной связи . Для установления такой связи, т.е. для ответа на вопрос «связано ли изменение зависимой переменной манипуляциями с независимой переменной?», необходимо придерживаться трех критериев: события должны происходить в соответствующем порядке, причина должна быть статистически связана с эффектом (причина и следствие происходили или сменяли друг друга в одно и то же время), альтернативные объяснения должны быть сведены к минимуму. Наиболее важным является третий критерий, так как он влияет на внутренную валидность (ВВ) эксперимента. ВВ относится к той мере, в какой удается устранить альтернативные объяснения. Чем больше рекламисту удается доказать, что именно манипулирование независимой переменной обусловило перемены зависимой переменной, тем выше уровень ВВ эксперимента. На ВВ влияют следующие факторы: предварительное измерение, взаимодействие, влияние фона, естественное развитие, инструментальная погрешность, отбор, выбывание. Наличие таких угроз снижает вероятность того, что основанные на результатах исследований решения будут корректными.

1. Предварительное измерение и взаимодействие .

Угроза предварительного измерения возникает тогда, когда беседа, проведенная в начале эксперимента, непосредственно сказывается на действиях и поведении респондента. Угроза взаимодействия возникает тогда, когда беседа, проведенная в начале эксперимента, увеличивает чувствительность и восприимчивость респондента к действию независимой переменной.

2. Влияние фона. Фон - события и воздействия, которые имеют место в эксперименте, помимо тех действий, которыми исследователь целенаправленно манипулирует, и потенциально влияют на его результат, измеряемый зависимой переменной. Угроза возникает при обстоятельствах, не поддающихся контролю.

3. Естественное развитие . Такая угроза возникает тогда, когда в ходе эксперимента респонденты могут устать, проголодаться, испытывать жажду, утратить интерес к исследованию.

4. Инструментальная погрешность . Под этим понимаются изменения в испытании измерительных инструментов (анкеты) или методов фиксации данных.

5. Отбор и выбывание . Такие угрозы имеют отношение к составу и характерным особенностям групп, участвующим в эксперименте. В эксперименте обычно участвуют две группы: экспериментальная и контрольная . Контрольная группа не подвергается манипулированию. Угроза отбора возникает тогда, когда характерные черты этих двух групп перед началом эксперимента отличаются. Угроза выбывания возникает тогда, когда характеристики групп различаются по важным демографическим признакам, установкам, поведением; а также своим первоначальным уровнем в отношении зависимой переменной, или по вероятной восприимчивости к воздействию независимой переменной.

Теперь поговорим о плане эксперимента. Сначала о квази- экспериментальных планах (неистинных экспериментов). Выделяют различные варианты таких планов.

1. План с одной группой и заключительным тестированием :

Группа 1. Воздействие → Заключительное тестирование. Недостатки такого плана: исследователь вынужден полагаться на собственные суждения при интерпретации результатов, контрольной группы не существует (угроза фонового влияния), невозможно контролировать некоторые угрозы (естественное развитие, отбор и выбывание).

2. План с одной группой, предварительным заключительным тестированием :

Группа 1. Предварительное тестирование → Воздействие → Заключительное тестирование. Этот план часто используется при тестировании цены товара, упаковки товара, реакции на рекламу). Недостатки плана: нельзя полной уверенностью заявить, что различия в уровнях предварительного и заключительного тестирования вызваны проведением рекламной кампании.

Теперь о планах истинных экспериментов . Здесь контрольная группа участвует. Кроме того, участники в эти группы отбираются случайным образом. Случайный отбор дает возможность контролировать многие из угроз ВВ. Эти планы более затратные, но дают большую информацию. Типы.

1. Смоделированный план с предварительным и заключительным тестированием .

План разработан с целью контроля угроз предварительного измерения и взаимодействия:

Группа 1 (Случайный отбор). Предварительное тестирование

Угрозы предварительного измерения и взаимодействия исключаются, так как предварительное и заключительное тестирования проводятся на разных людях. Но, существует возможность возникновения других угроз (влияние фона, естественное развитие, инструментальная погрешность, отбор).

2. План с заключительным тестированием и контрольной группой . Этот план отличается от предыдущего тем, как измеряется эффект воздействия (манипулирование). В предыдущем плане оценка определяется сравниванием результатов предварительного и заключительного тестирований. Здесь, оценка проводится сравнением результатов двух заключительных измерений (в разных группах):

Группа 1 (Случайный отбор). Заключительное тестирование

Группа 2 (Случайный отбор). Воздействие → Заключительное тестирование.

3. Две группы - четыре измерения: план с предварительным и заключительным тестированием и контрольной группой :

Группа 1 (Случайный отбор). Предварительное тестирование → Воздействие → Заключительное тестирование.

Группа 2 (Случайный отбор). Предварительное тестирование → Заключительное тестирование.

Этот план применяется тогда, когда необходимо получить прямое доказательство эквивалентности групп перед экспериментальным воздействием, или когда возникает сомнения в степени эквивалентности групп.

4. Четыре группы – шесть измерений: план Соломона с четырьмя группами.

План наиболее эффективный, но и наиболее ресурсоемкий. Эффективность обеспечивается возможностью контроля над всеми угрозами:

Группа 1 (случайный отбор). Предварительное тестирование → Воздействие → Заключительное тестирование.

Группа 2 (случайный отбор). Предварительное тестирование → Заключительное тестирование.

Группа 3 (случайный отбор). Воздействие → Заключительное тестирование.

Группа 4 (случайный отбор). Заключительное тестирование.

Приложение 2

Использование моделирующего эксперимента в маркетинговых исследованиях (Е. Иванова)

В ситуации, когда надо понять причины выбора того или иного товара, скрытые мотивационные факторы, влияющие на восприятие рекламы или нового товара, найти правильные «точки входа» при разработке коммуникативной стратегии компании, целью которой является «завоевание» потребителя подобные методы являются практически незаменимыми. Только они позволяют вскрыть глубинные мотивы поведения, которые часто не осознаются самими потребителями и нейтрализовать феномен «социальной желательности» (тенденцию давать «правильные», одобряемые обществом ответы на вопросы традиционной анкеты).

Одним из наиболее эффективных психологических методов является моделирующий эксперимент – воспроизведение в форме ролевой игры отдельных элементов рыночной ситуации: выбор потребителем товаров и услуг, принятие им решения о покупке, ситуация совершения покупки товара, восприятие рекламы и т. д. Основные преимущества метода заключаются в возможности изучать поведение представителей различных социальных групп в ситуациях максимально приближенных к реальности, а также моделировать новые ситуации в соответствие со спецификой исследовательских задач.

В основе моделирующего эксперимента лежит ролевая игра. С точки зрения решения маркетинговых исследований интерес представляют ресурсы ролевых игр, которые существенно расширяют и дополняют возможности других смежных методов, применяющихся в маркетинговых исследованиях (например, метода фокус-групп): создание ситуации максимально приближенной к реальным условиям на рынке; возможность увидеть паттерны поведения, которые люди не могут описать в словах; возможность непосредственного наблюдения за реакцией участников эксперимента на те или иные события или аргументы; возможность получить более емкую информацию о скрытых мотивах поведения потребителей; возможность выявить и сформулировать (т.е. вывести на уровень сознания) аргументы в пользу той или иной стратегии поведения и оценить степень их влияния на потребителей; прогностические возможности моделирующего эксперимента, позволяющие «предугадывать» поведение потребителя.

Вариант № 1. «Проектирование ». Используется в ситуации, когда необходимо разработать стратегию коммуникативной кампании или стратегию имиджевого позиционирования. В состав участников ролевой игры входят представители целевой аудитории, на которую рассчитана коммуникативная кампания (например, если стоит задача разработать стратегию имиджевого позиционирования для страховой компании, то участники моделирующего эксперимента – это потребители страховых услуг). Число участников ролевой игры – от 20 до 30 человек. Все участники разбиваются на три команды: одна команда жюри и две команды «проектантов».

Перед командами «проектантов» ставится задача разработать стратегию кампании (главная креативная идея, ключевые сообщения, PR-акции и т. д.). Далее жюри оценивает предложенные варианты компаний и происходит награждение победителя. В результате метод позволяет выявить ожидания от коммуникативной кампании, понять, на что прежде всего потребитель обращает внимание при выборе того или иного вида товаров или услуг, найти наиболее эффективные приемы воздействия на потребителя. В нашей практике данный тип моделирующего эксперимента был использован для разработки стратегии имиджевого позиционирования при выводе на рынок новой торговой марки шоколадных конфет в сегменте премиум. Было разработано два варианта стратегии. Моделирующий эксперимент был использован как инструмент, позволяющий протестировать оба варианта стратегии на предмет сравнительной эффективности ключевых сообщений, запускающих потребительское поведение, а также наглядно продемонстрировать Заказчику их воздействие на представителей целевой аудитории.

Согласно сценарию, две команды разработчиков стратегии представили на суд жюри, состоящего из представителей целевой аудитории, собственную концепцию новой торговой марки и ее ведущих атрибутов (ценностей бренда, его имени, логотипа и слогана), а также ключевые идеи позиционирования (основные рекламные идеи, персонажи бренда, и т.д.). В эксперименте принимали участие представители целевых аудиторий из числа постоянных покупателей (совершающих покупку не реже 1 раза в две недели). По результатам анализа была получена информация о следующих параметрах покупательского выбора: Ведущие ценности и потребности, связанные с употреблением данного вида продукта (шоколадных конфет сегмента премиум). Ведущие критерии оценки данного вида продукта. Критерии выбора нового продукта на рынке. Критерии сохранения лояльности «старым» брендам и/или отказа от них (каналы перетекания покупателей). Наиболее эффективные ключевые сообщения для рекламной кампании.

Вариант № 2. «Дебаты». Данный вариант моделирующего эксперимента используется в ситуации, когда необходимо разработать конкурентную стратегию, продемонстрировать преимущества по сравнению с остальными участниками рынка. Все участники ролевой игры разбиваются на противоборствующие команды и жюри. Согласно сценарию моделируется ситуация, в которой команды соперников вынуждены аргументировано доказать свою позицию при выборе того или иного товара или услуг (почему я предпочитаю именно «это?») Например, сталкиваются команды приверженцев различных марок автомобилей, клиенты различных банков, сторонники различных форм проведения досуга и т. д. Далее задаются основные параметры ситуации (необходимость представить товар на выставке, доказать свою точку зрения в телевизионном шоу и т. д.). После того, как представители команд представляют преимущества того или иного товара или услуг, начинаются дебаты между командами – участниками. По итогам соревнования жюри награждает команду-победителя. Игра позволяет понять глубинные мотивы потребительского поведения, выявить скрытые, латентные критерии выбора товаров и услуг. Данный вариант может использоваться не только в маркетинговых исследованиях, но и для оценки механизмов политических предпочтений избирателей, так как позволяет выявить скрытые пружины электорального выбора.

Этот вариант моделирующего эксперимента был использован ИМА-консалтинг для репозиционирования бренда на рынке соков средней ценовой категории. Ставилась задача – выявить в ходе эксперимента сильные и слабые характеристики бренда клиента, а также двух активно конкурирующих с ним брендов; определить ведущие качества, определяющие выбор продукта на рассматриваемом рынке. Моделировалась ситуация, когда участникам групп необходимо было убедить группу «новых» покупателей сделать выбор в пользу одной из трех торговых марок, анализируемых в эксперименте. Группы участников были сформированы из числа лояльных потребителей трех изучаемых брендов, а также потребителей, не имеющих устойчивых предпочтений в отношении рассматриваемого типа продуктов.

Методика эксперимента

Методика эксперимента – это совокупность способов и приемов его проведения. Методика, которая относится ко всему исследованию, является общей. Для отдельных опытов в пределах данного исследования могут создаваться дополнительные частные методики. Значение частных методик возрастает с увеличением разнообразия явлений, подлежащих изучению.

Методика экспериментального исследования определяет оборудования., количество опытов, план работы, затраты времени и средств.

Построение правильной методики позволяет в кратчайшие сроки и при минимальных экологических и трудовых затратах получить ожиданий от эксперимента результат и избежать появления ненужных опытных данных, из которых никаких выводов сделать нельзя.

Эксперимент может проводиться в пассивной форме (наблюдение без вмешательства в условия развития явления) и активной (создание определенных условий развития явления).

Пассивное наблюдение применяют преимущественно для предварительной проверки общей правильности рабочей гипотезы и установления направления развития явления. При пассивном наблюдении исследователь регистрирует различные интересующие его параметры, характеризующие явление. Для регистрации употребляют разнообразные средства измерений. Пассивное наблюдение можно чередовать с активным.

Наблюдение становится активным, когда исследователь сам определяет условия развития явления в желаемом направлении, чтобы получить ясные закономерности.

Первой ступенью активного наблюдения являются поисковые опыты. Целью поисковых опытов является проверка отдельных частей разработанной методики и приспособленности приборов к тем измерениям, которые определены методикой. В ходе поисковых опытов устанавливают также факторы, определяющие развитие является или отбирают основные факторы. Поисковые опыты можно ставить и для того, чтобы найти основания для расчета числа опытов.

После проведения поисковых опытов все факторы, обусловливающие явления, разделяют на основные, оказывающие наибольшее влияние на развитие явления и несущие наибольшую информацию о нем, и дополнительные, влияющие на развитие явления второстепенно. При постановке опыта измеряют лишь параметры характеризующие основные факторы.

Следует иметь в виде, что данное деление во многом является условным, поскольку при изменении условий опыта дополнительные факторы могут стать основными и наоборот.

Чтобы устранить или по крайней мере уменьшить ошибку, появляющуюся вследствие деления факторов на основные и дополнительные, когда при постановке опытов стремится нейтрализовать дополнительные факторы, т.е. создать такие условия, при которых действие дополнительных факторов было бы возможно более неизменно и незначительно. Исследователь при этом должен стремиться сделать переменными величинами лишь основными факторами. Таким образом, общим принципам исследования является постоянства всех остальных факторов при изменении избранных.

Есть четыре основных приёма нейтрализации дополнительных факторов.

Метод резко изменения переменных факторов при относительно малом изменении остальных. При этом методе основной фактор стараются изменять в наиболее широком диапазоне значений, а изменение остальных минимизировать. Например, при снятии характеристики насоса Q=f(p), или КПД=f(p) желательно максимально широко изменять давление, а второстепенные факторы, такие, как износ машины, влияние вязкости масла, температурного репсима и т.д. свести к минимуму, для чего исследование лучше проводить на равноизношенных машинах (например, при сравнении двух различных типов машин), производить охлаждение РЖ и т.д.

Метод контрольных опытов, когда меняющиеся дополнительные факторы одновременно воздействуют на несколько объектов с различными градациями основного фактора, один из которых считают контрольным (эталонам) и с ним сравнивают все остальные. Например, при исследование влияние присадки к маслу (смазке) на износ подшипников эксперимент может проводится для двух групп подшипников, из которых применена смазка с присадкой, в другой - без. Поскольку в большинстве случаев избежать влияние изменение температурного, нагрузочного и скоростного режима на износ подшипников не удается, то испытывают две группы одновременно в таких меняющихся условиях, собой результаты износа. Групп подшипников для испытаний может быть гораздо больше двух, в каждой из них может использоваться различные присадки или различные ее содержание, причем одна из групп всегда является контрольной (эталонной).

Метод «чистых» опытов . При этом методе стремятся искусственно создать условия, в которых дополнительные факторы не проявлялись бы или не влияли бы при проведении опытов на изменяющиеся основные факторы. Этот метод используют лишь в лабораторных условиях.

Например, в реальных эксплуатационных условиях очень трудно исследовать работу гидросистемы рулевого управления автомобиля, т.к. момент сопротивления повороту управляемых колес постоянно меняется изза наличия неровностей дорожного полотна, различного коэффициента трения на различных его участках и т.д. Кроме того, на величину момента сопротивления повороту управляемых колес при длительном проведении испытаний будут оказывать влияние износ шин, давление воздуха в шинах, изменение массы автомобиля (к примеру, в результате дозаправки топливом) и т.д. Провести точные научные исследования в таких условиях крайне затруднительно, поэтому при испытаниях гидросистемы рулевого управления идеализирует ее взаимодействие внешней средой, искусственно создавая в лабораторных условиях постоянные и точно известные значения сил сопротивления повороту колеса, или, в других случаях, обеспечивая изменения сил сопротивления по определенному закону. Этот же метод «частичных» опытов будет очень подходящим для Воссоздания в лабораторных условиях угловых вибраций и ударных воздействий нужной величины на управляемые колеса автомобиля, имитирующие движение автомобиля по неровностям дороги. В реальных дорожных условиях (вне специальных полигонов) получить подобные возмущения на систему с нужной частотой и амплитудой почти невозможно.

Метод разных знаков состоит в том, что одному и тому же фактору, который невозможно исключить полностью, сначала придают положительное, а затем отрицательное значение, чтобы при вычисление средней величины взаимно погасились ошибки от неучета влияния этого фактора.

Например, при исследовании процесса торможения автомобиля угол уклона дороги в продольном направлении, а также скорость ветра могут привести к ощутимой ошибке. Чтобы исключить ошибку от влияние этих факторов, производят опыты при движении автомобиля в одну, а затем другую (обратную) сторону одного и того же дорожного участка, после чего полученные данные усредняют.

Планирование эксперимента. Количество опытов.

При определении необходимого количества опытов следует руководствоваться двоякого рода положениями.

Во-первых, необходима такое количество опытов, которое достаточно точно выявило бы форму функциональной зависимости двух параметров. Например, положение прямой определяется двумя точками, дуги постоянного радиуса - тремя. Для более сложных кривых количества точек определяется следующим правилом: рассматривая сложную кривую как комбинацию прямых и простых кривых, описывают каждый перегиб кривой по меньшей мере тремя точками, а каждый участок, близкий к прямолинейному – двумя. Для более точного определения численных значений функции рекомендуется каждый перегиб кривой обосновывать как минимум пятью опытами. Кроме того, особо тщательно должны случатся резкие перегибы кривых или скачкообразна изменение развития явления.

Для такого определения количество опытных точек используют графики закономерности рабочей гипотезы. В случае, если закономерность в развития явления заранее неизвестна, опытные точки располагают по оси абсцисе равномерно. В ходе проведения опытов положение этих точек может быть уточнено в соответствии с действительными местами изгибов кривых.

Во – вторых, необходимо учитывать случайные ошибки опыта. Как известно, для уменьшение влияние таких ошибок опыты повторяют и берут среднюю арифметическую. Причем количество необходимых повторений зависит от среднего квадратического отклонения измерений и заданной надежности результата.

Под надежностью опыта будет понимать вероятность получения тех же результатов при новых измерений этой же величины или при повторение опыта в тех же условиях.

Из теории вероятности известно, что чем больше относительные колебание результатов и чем большую надежность опыта желательно получить, тем больше должно быть произведено повторений опыта. Наиболее удобным образом для практического использование эта зависимость установлена В.И. Романовским и представлена в виде таблицы

Необходимое количество опытов (измерений)

Надежность опыта Р.

Для того, чтобы найти по этой таблице необходимое количество опытов, нужно задаться надежностью Р и ошибкой А, взятой в долях среднего квадратического отклонений σ.

Например, при измерений менее точным инструментом какого – либо размера среднее квадратическое отклонение равно 0,9 мм, а более точным – 0,15 мм. Пусть допустимая ошибка измерений при надежности 0,95 должна быть не более 0,3 мм, что составляет 1/3σ при измерение менее точным и 2σ при измерении более точным инструментом. По таблице определим, что в этих условиях требуется более 27 измерений менее точным и только 4 измерения более точным инструментом.

Если среднее квадратическое отклонение результата измерений заранее неизвестно, то такой анализ можно проводить последовательно с проведением опытов по следующей схеме: после каждого измерения, начиная с третьего, вычисляют математическое ожидание и среднее квадратическое отклонение. Как только надежность и вычисление ошибки в доля стандарта σ дают по таблице то количество измерений, которое уже произведено, опыты прекращают.

В те случаях, когда нет нужных данных для определения количества повторяемых опытов, а поисковые опыты требуют не меньших затрат, чем основные, часто принимают тройную повторность опытов как минимальную.

Планирование однофакторных и многофакторных экспериментов.

Под фактором следует понимать переменную величину, предположительно влияющую на результат эксперимента. Фактором может быть давление, расход, вязкость РЖ и т.д.

При планирование однофакторного эксперимента немаловажное значение имеет правильный выбор количество и расположение экспериментальных точек на исследуемой функции. Во многих случаях целесообразно выбрать план эксперимента с одинаковыми интервалами между точками. Однако в зависимости от параметра, по которому берется равный интервал изменение его значений, результат опыта может выглядеть по – разному. Например, при исследовании жидкости на дросселе от скорости ее течения () графики будут иметь вид:

При изменении регулируемой переменной ν через равные промежутки Δν получим график, изображения на рис. а). На участке больших скоростей точек недостаточно, а на участке малых – они в избытке. На рис. б) ситуация выглядит противоположно. Наиболее правильным будет вариант, изображен на рис. в), где между экспериментальными точками заключены одинаковые отрезки ΔS опытной кривой. Однако такой подход затруднителен в расчете и для его реализации необходимо до проведение опытов знать характер исследуемой зависимости.

При выборе между вариантами, изображенными на рис. а) и б) лучше пользоваться критерием относительной точности данных на разных участках исследуемой функции. Например, для гидросистем испытания, проводимые при низком давление или при малой мощности, будут наименее точными. С этих позиции участки кривой, на которых данные вызывают наибольшее сомнение, стараются заполнить большим числом точек. С этой точки зрения вариант, изображенный на рис. а) предпочтительнее.

При планировании многофакторных экспериментов рассматривают два или большее число переменных факторов. Такие эксперименты называются двухфакторными, трехфакторными и т.д.

Если при эксперименте определяется зависимая переменная R, которая является функцией нескольких независимых переменных x,y,z и т.д., то план многофакторного эксперимента состоит в том, что все независимые переменные, кроме одной, полагают постоянными, а это одна переменная изменяется во всем интервале значения, при этом выбор интервала между значениями переменной производится по одному из рассмотренных выше правил. Далее изменяется другая независимая переменная, а все остальные выдерживают постоянными. По существу многофакторный эксперимент представляет собой просто последовательность однофакторных экспериментов. Этот подход позволяет найти такие простые функции, как

R=ax n +by m

план двухфакторного эксперимента, в котором каждый фактор берется на пяти уровнях, схематически можно представить в следующем виде:

уровни переменной у

уровни пере-

меной х 3 * * * * *

Звездочкой обозначены комбинации независимых, при которых должен проводиться эксперимент.

В случае более сложных функций, например таких, как

указанный выше план будет являться очень ограниченным и не позволит определить эти зависимости. В этом случае рассматривают несколько уровней независимых переменных х и у, например:

уровни переменной у

уровни переменной у

уровни пере-

меной х 3 * * * * *

Или, возможно, придется заполнить весь квадрат и провести эксперимент для всех 25 комбинаций переменных х и у.

При планирование эксперимента следует иметь в виду, что он не обязательно должен быть сбалансированных. Это означает, что может выбрать десять уровней переменной х и только три уровня переменной у, если считается, что зависимость R от х является более важной или более сложной.

Кроме того, возможны и другие, более сложные, чем описанный выше, планы, ориентированный на конкретные технические процессы и построенные на основании априорных сведений о характере исследуемой функции.

Психологический эксперимент - проводимый в специальных условиях опыт для получения новых научных знаний о психологии посредством целенаправленного вмешательства исследователя в жизнедеятельность испытуемого.

Различными авторами понятие «психологический эксперимент» трактуется неоднозначно, зачастую под экспериментом в психологии рассматривается комплекс разных самостоятельных эмпирических методов (собственно эксперимент , наблюдение , опрос , тестирование) . Однако традиционно в экспериментальной психологии эксперимент считается самостоятельным методом.

В рамках психологического консультирования, психологическим экспериментом называют специально созданную ситуацию, предназначенную для более целостного (в различных модальностях) переживания клиентом собственного опыта.

Специфика психологического эксперимента

В психологии экспериментальное исследование обладает своей спецификой, позволяющей рассматривать его отдельно от исследований в других науках. Специфика психологического эксперимента заключается в том, что:

  • Психику как конструкт невозможно непосредственно наблюдать и о её деятельности можно узнать, лишь основываясь на её проявлениях, к примеру, в виде определённого поведения .
  • При изучении психических процессов считается невозможным выделить какой-то один из них, и воздействие всегда происходит на психику в целом (или, с современной точки зрения, на организм как единую неделимую систему).
  • В экспериментах с людьми (а также некоторыми высшими животными , например, приматами) происходит активное взаимодействие между экспериментатором и испытуемым.
  • Данное взаимодействие, в том числе, делает необходимым наличие инструкции испытуемому (что, очевидно, нехарактерно для естественнонаучных экспериментов).

Общие сведения

В упрощённом примере независимую переменную можно рассматривать как некий релевантный стимул (St(r) ), силу которого варьирует экспериментатор, в то время, как зависимая переменная - реакция (R ) испытуемого, его психики (P ) на воздействие этого релевантного стимула.

Однако, как правило, именно искомая стабильность всех условий, кроме независимой переменной, в психологическом эксперименте недостижима, так как практически всегда помимо этих двух переменных присутствуют и дополнительные переменные , систематические иррелевантные стимулы (St(1) ) и случайные стимулы (St(2) ), ведущие соответственно к систематическим и случайным ошибкам. Таким образом окончательное схематическое изображение экспериментального процесса выглядит так:

Следовательно, в эксперименте можно выделить три вида переменных:

  1. Дополнительные переменные (или внешние переменные)

Итак, экспериментатор пытается установить функциональную зависимость между зависимой и независимой переменной, что выражается в функции R =f(St(r) ), попытавшись при этом учесть систематическую ошибку, возникшую вследствие воздействия иррелевантных стимулов (примерами систематической ошибки можно назвать фазы Луны , время суток и др.). Для уменьшения вероятности воздействия случайных ошибок на результат исследователь стремится проводить серию опытов (примером случайной ошибки, может быть, например, усталость или же попавшая в глаз испытуемому соринка).

Основная задача экспериментального исследования

Общая задача психологических экспериментов заключается в том, чтобы установить наличие связи R =f(S, P ) и, по возможности, вид функции f (бывают различные виды связи - причинно-следственные, функциональные, корреляционные и др.). В данном случае, R - реакция испытуемого, S - ситуация, а P - личность испытуемого, психика, или «внутренние процессы» . То есть, грубо говоря, так как психические процессы невозможно «увидеть», в психологическом эксперименте на основании реакции испытуемых на стимулирование, регулируемое экспериментатором, делается какой-либо вывод о психике, психических процессах или личности испытуемого.

Этапы эксперимента

В каждом эксперименте можно выделить следующие этапы. Первый этап - постановка задачи и цели, а также построение плана эксперимента. План эксперимента должен строиться с учётом накопленных знаний и отражать актуальность проблемы.

Второй этап - собственно процесс активного воздействия на окружающий мир, в результате чего накапливаются объективные научные факты. Получению этих фактов в значительной степени способствует правильно подобранная методика эксперимента. Как правило, метод эксперимента формируется на основе тех трудностей, которые необходимо устранить, чтобы решить задачи, поставленные в эксперименте. Методика, разработанная для одних экспериментов, может оказаться пригодной и для других экспериментов, то есть приобрести универсальное значение.

Валидность в психологическом эксперименте

Как и в естественнонаучных экспериментах, так и в психологических краеугольным камнем считается понятие валидности : если эксперимент валиден, учёные могут обладать некоторой уверенностью в том, что ими было измерено именно то, что они хотели измерить. Предпринимается множество мер для того, чтобы соблюдать все виды валидности . Однако быть абсолютно уверенным в том, что в каком-то, даже самом продуманном, исследовании можно совершенно соблюсти все критерии валидности, невозможно. Полностью безупречный эксперимент недостижим.

Классификации экспериментов

В зависимости от условий проведения выделяют

  • Лабораторный эксперимент - условия специально организуются экспериментатором. Основная задача обеспечить высокую внутреннюю валидность. Характерно выделение единичной независимой переменной. Основной способ контроля внешних переменных - элиминация (устранение). Внешняя валидность ниже чем в полевом эксперименте.
  • Полевой, или естественный эксперимент - эксперимент проводится в условиях, которые экспериментатор не контролирует. Основная задача обеспечить высокую внешнюю валидность. Характерно выделение комплексной независимой переменной. Основные способы контроля внешних переменных - рандомизация (уровни внешних переменных в исследовании точно соответствуют уровням этих переменных в жизни то есть за пределами исследования) и константность (сделать уровень переменной одинаковым для всех участников). Внутренняя валидность как правило ниже, чем в лабораторных экспериментах.

В зависимости от результата воздействия выделяют

Констатирующий эксперимент - экспериментатор не изменяет свойства участника необратимо, не формирует у него новых свойств и не развивает те, которые уже существуют.

Формирующий эксперимент - экспериментатор изменяет участника необратимо, формирует у него такие свойства, которых раньше не было или развивает те, которые уже существовали.

Патопсихологический эксперимент - целью эксперимента ставится задача качественной и количественной оценки основных процессов мышления; экспериментатор, как правило, не интересуется непосредственными результатами тестирования, так как в ходе эксперимента проводится исследование способа достижения результата.

В зависимости от уровня осознанности

В зависимости от уровня осознанности эксперименты также можно разделить на

  • те, в которых испытуемому даются полные сведения о целях и задачах исследования,
  • те, в которых в целях эксперимента некоторая информация о нём от испытуемого утаивается или искажается (например, когда необходимо, чтобы испытуемый не знал об истинной гипотезе исследования, ему могут сообщить ложную),
  • и те, в которых испытуемому неизвестно о целях эксперимента или даже о самом факте эксперимента (например, эксперименты с привлечением детей).

Организация эксперимента

Безупречный эксперимент

Ни один эксперимент ни в одной науке не способен выдержать критики сторонников «абсолютной» точности научных выводов. Однако как эталон совершенства Роберт Готтсданкер ввёл в экспериментальную психологию понятие «безупречный эксперимент» - недостижимый идеал эксперимента, полностью удовлетворяющий трём критериям (идеальности, бесконечности, полного соответствия), к приближению к которому должны стремиться исследователи .

Безупречный эксперимент - невоплотимая на практике модель эксперимента, используемая психологами -экспериментаторами в качестве эталона . В экспериментальную психологию данный термин ввёл Роберт Готтсданкер , автор известной книги «Основы психологического эксперимента», считавший, что использование подобного образца для сравнения приведёт к более эффективному совершенствованию экспериментальных методик и выявлению возможных ошибок в планировании и проведении психологического эксперимента .

Критерии безупречного эксперимента

Безупречный эксперимент, по Готтсданкеру, должен удовлетворять трём критериям:

  • Идеальный эксперимент (изменяются только независимая и зависимая переменные , отсутствует влияние на неё внешних или дополнительных переменных)
  • Бесконечный эксперимент (эксперимент должен продолжаться бесконечно, так как всегда остаётся возможность проявления ранее неизвестного фактора)
  • Эксперимент полного соответствия (экспериментальная ситуация должна быть полностью тождественна тому, как бы она происходила «в действительности»)

Взаимодействие между экспериментатором и испытуемым

Проблема организации взаимодействия между экспериментатором и испытуемым считается одной из основных, порождённых спецификой психологической науки. В качестве самого распространённого средства непосредственной связи между экспериментатором и испытуемым рассматривают инструкцию.

Инструкция испытуемому

Инструкция испытуемому в психологическом эксперименте даётся для того, чтобы увеличить вероятность, что испытуемый адекватно понял требования экспериментатора, поэтому в ней даётся чёткая информация относительно того, как испытуемый должен себя вести, что его просят делать. Для всех испытуемых в пределах одного эксперимента даётся одинаковый (или равноценный) текст с одинаковыми требованиями. Однако в силу индивидуальности каждого субъекта , в экспериментах перед психологом стоит задача обеспечения адекватного понимания инструкции человеком. Примеры различия между испытуемыми, которые обуславливают целесообразность индивидуального подхода:

  • одним испытуемым достаточно прочитать инструкцию один раз, другим - несколько раз,
  • одни испытуемые нервничают, а другие остаются хладнокровными,
  • и т. д.

Требования к большинству инструкций:

  • Инструкция должна объяснять цель и значение исследования
  • Она должна чётко изложить содержание, ход и детали опыта
  • Она должна быть подробной и в то же время достаточно лаконичной

Проблема выборки

Другая задача, которая стоит перед исследователем, это формирование выборки. Исследователю прежде всего необходимо определить её объём (количество испытуемых) и состав, при этом выборка должна быть репрезентативна, то есть исследователь должен иметь возможность распространить выводы, сделанные по результатам исследования данной выборки, на всю генеральную совокупность , из которой была собрана эта выборка . Для этих целей существуют различные стратегии отбора выборок и формирования групп испытуемых. Очень часто для простых (однофакторных) экспериментов формируются две группы - контрольная и экспериментальная . В некоторых ситуациях бывает достаточно сложно отобрать группу испытуемых, не создав при этом систематической ошибки отбора .

Этапы психологического эксперимента

Общая модель проведения психологического эксперимента соответствует требованиям научного метода . При проведении целостного экспериментального исследования выделяют следующие этапы :

  1. Первичная постановка проблемы
    • Постановка психологической гипотезы
  2. Работа с научной литературой
    • Поиск определений базовых понятий
    • Составление библиографии по тематике исследования
  3. Уточнение гипотезы и определение переменных
    • Определение экспериментальной гипотезы
  4. Выбор экспериментального инструмента, позволяющего:
    • Управлять независимой переменной
    • Регистрировать зависимую переменную
  5. Планирование экспериментального исследования
    • Выделение дополнительных переменных
    • Выбор экспериментального плана
  6. Формирование выборки и распределение испытуемых по группам в соответствии с принятым планом
  7. Проведение эксперимента
    • Подготовка эксперимента
    • Инструктирование и мотивирование испытуемых
    • Собственно экспериментирование
  8. Первичная обработка данных
    • Составление таблиц
    • Преобразование формы информации
    • Проверка данных
  9. Статистическая обработка
    • Выбор методов статистической обработки
    • Преобразование экспериментальной гипотезы в статистическую гипотезу
    • Проведение статистической обработки
  10. Интерпретация результатов и выводы
  11. Фиксация исследования в научном отчёте , монографии , письме в редакцию научного журнала

Преимущества эксперимента как метода исследования

Можно выделить следующие основные преимущества, которыми обладает метод эксперимента в психологических исследованиях :

  • Возможность выбрать момент начала события
  • Повторяемость изучаемого события
  • Изменяемость результатов путём сознательного манипулирования независимыми переменными
  • Обеспечивается высокая точность результатов
  • Возможны повторные исследования в аналогичных условиях

Методы контроля

  1. Метод исключения (если известен определенный признак - дополнительная переменная, то его можно исключить).
  2. Метод выравнивания условий (используется, когда известен тот или иной вмешивающийся признак, но его избежать нельзя).
  3. Метод рандомизации (применяется в случае, если влияющий фактор не известен и избежать его воздействия невозможно). Способ перепроверки гипотезы на разных выборках, в разных местах, на разных категориях людей и т. п.

Критика экспериментального метода

Сторонники неприемлемости экспериментального метода в психологии опираются на следующие положения:

  • Субъект-субъектное отношение нарушает научные правила
  • Психика обладает свойством спонтанности
  • Психика слишком непостоянна
  • Психика слишком уникальна
  • Психика - слишком сложный объект исследования

Психолого-педагогический эксперимент

Психолого-педагогический эксперимент, или формирующий эксперимент - это специфический исключительно для психологии вид эксперимента, в котором активное воздействие экспериментальной ситуации на испытуемого должно способствовать его психическому развитию и личностному росту .

Психолого-педагогический эксперимент требует очень высокой квалификации со стороны экспериментатора, так как неудачное и некорректное использование психологических методик может привести к негативным для испытуемого последствиям.

Психолого-педагогический эксперимент является одним из видов психологического эксперимента .

В ходе психолого-педагогического эксперимента, предполагается формирование определенного качества (именно поэтому он ещё называется "формирующий") обычно участвуют две группы: экспериментальная и контрольная. Участникам экспериментальной группы предлагается определенное задание, которое (по мнению экспериментаторов) будет способствовать формированию заданного качества. Контрольной группе испытуемых данное задание не предоставляется. В конце эксперимента две группы сравниваются между собой для оценки полученных результатов.

Формирующий эксперимент как метод появился благодаря теории деятельности (А.Н. Леонтьев, Д.Б.Эльконин и др.), в которой утверждается идея о первичности деятельности по отношению к психическому развитию. В ходе формирующего эксперимента активные действия совершают как испытуемые, так и экспериментатор. Со стороны экспериментатора необходима высокая степень вмешательства и контроля над основными переменными. Это отличает эксперимент от наблюдения или экспертизы.

Естественный эксперимент

Естественный эксперимент, или полевой эксперимент, - в психологии это вид эксперимента, который проводится в условиях обычной жизнедеятельности испытуемого с минимумом вмешательства экспериментатора в этот процесс .

При проведении полевого эксперимента сохраняется возможность, если это позволяют этические и организационные соображения, оставить испытуемого в неведении о своей роли и участии в эксперименте, что имеет преимущество в том, что на естественность поведения испытуемого не скажется факт проведения исследования.

Лабораторный эксперимент, или искусственный эксперимент, проводится в искусственно созданных условиях (в рамках научной лаборатории) и в котором, по мере возможности, обеспечивается взаимодействие исследуемых субъектов только с теми факторами , которые интересуют экспериментатора. Исследуемыми субъектами считаются испытуемые или группа испытуемых, а интересующие исследователя факторы называются релевантными стимулами .

Специфика, отличающая психологический лабораторный эксперимент от экспериментов в других науках, состоит в субъект-субъектном характере отношений между экспериментатором и испытуемым, выражающемся в активном взаимодействии между ними.

Лабораторный эксперимент ставят в тех случаях, когда исследователю необходимо обеспечить максимально возможный контроль над независимой переменной и дополнительными переменными. Дополнительными переменными называют иррелевантные, или нерелевантные, и случайные стимулы, в естественных условиях которые контролировать намного сложнее.

Контроль над дополнительными переменными

В качестве контроля над дополнительными переменными исследователь должен осуществлять: Выяснение всех нерелевантных факторов, какие возможно выявить По возможности - сохранение этих факторов неизменными в процессе эксперимента Отслеживание изменения нерелевантных факторов в течение эксперимента

Патопсихологический эксперимент

Патопсихологический диагностический эксперимент имеет специфические отличия от традиционного тестового метода исследования в плане процедуры исследования и анализа результатов исследования по качественным показателям (отсутствие временного ограничения выполнения задания, исследование способа достижения результата, возможности использования помощи экспериментатора, речевые и эмоциональные реакции во время выполнения задания и т. п.). Хотя сам стимульный материал методик может оставаться классическим. Именно это отличает патопсихологический эксперимент от традиционного психологического и психометрического (тестового) исследования. Анализ протокола патопсихологического исследования - особая технология, требующая определенных навыков, а сам «Протокол - душа эксперимента» .

Одним из основных принципов построения экспериментальных приемов, направленных на исследование психики больных, является принцип моделирования обычной психической деятельности, осуществляемой человеком в труде, учении, общении. Моделирование заключается в том, что вычленяются основные психические акты и действия человека и провоцируется или, лучше сказать, организуется выполнение этих действий в непривычных, несколько искусственных условиях. Количество и качество такого рода моделей очень многообразны; здесь и анализ, и синтез, и установление различных связей между предметами, комбинирование, расчленение и т. д. Практически большинство экспериментов заключается в том, что больному предлагают выполнить какую-либо работу, предлагают ему ряд практических заданий либо действий «в уме», а затем тщательно регистрируют, каким способом больной действовал, а если ошибался, то чем были вызваны и какого типа были эти ошибки

  • Солсо Р. Л., Джонсон Х. Х., Бил М. К. Экспериментальная психология: практический курс. - СПб.: прайм-ЕВРОЗНАК, 2001.
  • Готтсданкер, Роберт; "Основы психологического эксперимента" ; Изд-во: М.: МГУ, 1982 г.;
  • Д. Кэмпбелл. Модели экспериментов в социальной психологии и прикладных исследованиях. М.,Прогресс 1980.
  • Готтсданкер Р. Основы психологического эксперимента. М.: МГППИЯ, 1982. С. 51-54.
  • Никандров В. В. Наблюдение и эксперимент в психологии. СПб.: Речь, 2002. С. 78.
  • При экспериментировании даже опытный исследователь не гарантирован от ошибок и искажений информации. Часть из них можно устранить, если более тщательно подходить к построению эксперимента. Другая часть в принципе неустранима» Но учет самой этой возможности, - возможности ошибок - позволяет вносить необходимые поправки.

    Прежде всего ошибочно может быть названо экспериментом то что по сути дела таковым не является. При проведении параллель­ного эксперимента можно например, в одной заводской бригаде изменить систему оплаты труда, а в другой не менять, и может оказаться, что в первой бригаде производительность труда повы­силась. Однако такого рода ситуация ни в коей мере не будет экспе­риментальной, если - не будут приняты во внимание некоторые важные характеристики обеих групп и за ними ни будет установлен: контроль.

    Экспериментальная и контрольная бригады должны быть равными по количественному составу, по роду деятельности, по распределению производственных функций, по типу руководства или другим важным c точки зрения гипотезы характеристикам. Если какие-либо важные групповые свойства не могут быть выравнены, следует попытаться их каким-то образом нейтрализовать или за­фиксировать и учесть при анализе результатов.

    В тех случаях, когда социолог не делает этого, он не имеет нрава называть созданную ситуацию экспериментальной и объяснять изменение производительности изменением системы оплаты труда, так как изменение производительности может оказаться вы­званным любым другим случайным фактором, а не изменением; оплаты труда. Прежде чем называть исследование эксперименталь­ным, исследователь должен проанализировать, есть ли у него для: этого основания, иными словами, создал ли он необходимые условия и обеспечил ли нужный уровень измерения и контроля.

    При формулировании гипотезы и при переходе от общей гипоте­зы коперациональным переменным могут возникнуть ошибки, свя­занные с логикой рассуждений.

    В качестве объединяющей причины при формулировке гипотезы: могут быть ошибочно определены выделенные механизмы и связи. Обычно это бывает при изучении малоизвестных явлений, и тогда полученные в эксперименте негативные результаты являются положительным вкладом в разработку теоретической модели объекта наблюдения, так как они показывают, что данный механизм или связь не обусловливают происходящих процессов.

    Ошибки возможны при переходе от определения гипотетической

    связи к описанию ее эмпирических показателей. Неверно выбранные показатели лишают эксперимент какой бы то ни было ценности, вне зависимости от того, насколько тщательно оно проводился. Возможны ошибки, связанные, с субъективным восприятием ситуации как участниками эксперимента, так и исследователем. Эксперимен­татору часто бывает свойственна тенденция переоценивать воздей­ствие исследуемой переменной, и это приводит к тому, что любой двусмысленный факт он склонен толковать в желательном для него направлении.


    Возможность субъективном толкования ситуации есть и у чле­нов экспериментальной группы: они могут воспринимать опреде­ленные черты экспериментальной ситуации в соответствии, с соб­ственными установками, а не в том значении, в каком они представ­ляются экспериментатору. Такое расхождение в восприятии если оно не учитывается при планировании эксперимента, обязательно скажется в ходе анализа результатов и значительно снизит их достоверность.

    Ослабление контроля и понижение степени «чистоты» экспери­мента повышают возможность воздействия дополнительных перемен­ных или случайных факторов, которое по окончании эксперимента не может быть учтено или оценено. Это в свою очередь очень сильно понижает достоверность сделанных выводов.

    Недостаточно опытного, исследователя подстерегает опасность, связанная с применением статистических методов, Он может при­менить методы, не соответствующие задаче исследования. Такая возможность относится как к построению экспериментальной груп­пы, так и к способу анализа результатов.

    Применение эксперимента в социологии связано с целым рядом трудностей, не позволяющих добиться чистоты естественнонаучного эксперимента, поскольку нельзя устранить влияние отношений, существующих за пределами исследуемого, невозможно осуществить контроль факторов в той степени, как это удается в естественнона­учном эксперименте, повторить в той же самой форме ход и ре­зультаты.

    Эксперимент в социологии затрагивает непосредственно конк­ретного человека, а Это ставит также и эпические проблемы, есте­ственно, сужает границы применения эксперимента и требует от исследователя повышенной ответственности.

    Литература для дополнительного чтения

    Ленин В. R, Великий почин. - Полн. собр. соч., т. 39, с. 1-29.

    Афанасьев В. Г. Управление обществом как социологическая проблема. - В кн.: Научное управление обществом. М.: Мысль, 1968, вып. 2, с. 218-219.

    Мелева Л. А., Сивоконь П. Е. Социальный эксперимент и его методологические основы. М.: Знание 1970. 48 с.

    Кузнецов В. П. Эксперимент как метод преобразования объекта.- Вести. МГУ.

    Сер. 7. Философия, 1975, № 4, с. 3-10.

    Куприян А. П. Проблема эксперимента в системе общественной практики М. Наука, 1981. 168 с.

    Лекции по методике конкретных социальных исследований/Под ред. Г. М. Анддреевой. М.: Изд-во МГУ, 1972, с. 174-201.

    Михайлов С. Эмпирическое социологическое исследование. М.: Прогресс, 1975 с, 296-301.

    Основы марксистско-ленинской социологии. М.: Прогресс, 1972, с. 103-108. Процесс социального исследования/Под общ. ред. Ю. Е. Волкова. М.: Прогресс 1975, разд. ПД II.4.

    Пэнто Р., Гравитц М. Методы социальных наук. М.: Прогресс, 1972, с.557-562.

    Рихтаржик К. Социология на путях познания. М.: Прогресс, 1981, с. 89-112.

    Рузавин Г. И. Методы научного исследования. М.: Мысль, 1974, с. 64-84.

    Штофф В. А. Введение в методологию научного познания. Л.; Изд-во ЛГУ. 1972. 191 с.

    Раздел четвертый