Необходимость контроля посторонних факторов для достижения внутренней и внешней достоверности результатов эксперимента уже обсуждалась. В этом разделе рассматриваются следующие посторонние факторы исторические, зрелости, эффект тестирования, инструментария, статистическая регрессия, отклонение выборки и убыль. [c.278]
Эффект тестирования, который проявляется в том, что предшествующее наблюдение влияет на последующее. [c.279]
Основной эффект тестирования имеет место тогда, когда предшествующее наблюдение влияет на Рассмотрим эксперимент по определению влияния рекламы на восприятие какой-либо марки продукта. Респондентам раздается предварительная анкета для уровня их осведомленности о предмете и отношения к нему. Затем им предлагают просмотреть рекламный ролик, показываемый в одной из телепрограмм. После этого им опять предлагают заполнить анкету, где, помимо прочих, содержатся и вопросы об отношении к исследуемой торговой марке. Если отношение к торговой марке до и после просмотра рекламы не изменилось, свидетельствует ли это о том, что реклама была неэффективной Альтернативным объяснением может быть то, что респонденты пытались сохранить связь между своими оценками продукта до и после просмотра рекламы. Вследствие основного эффекта тестирования оценка товара после просмотра рекламы определялась не столько самой рекламой, сколько оценкой, высказанной до ее просмотра. Основной эффект тестирования может также носить характер ответной реакции, заставляя респондентов скрывать свое истинное отношение к предмету исследования только потому, что оно подвергается Основной эффект тестирования нарушает внутреннюю достоверность результатов эксперимента. [c.280]
Эта модель очень проста в применении. Поскольку нет предварительных измерений, отсутствует и эффект тестирования, однако на результаты могут повлиять факторы отклонения отбора и убыли. Предполагается, что обе группы имеют одинаковое предварительное восприятие объекта исследования, поскольку они сформированы на основе случайного отбора. Однако, поскольку предварительное измерение не проводится, проверить это предположение невозможно. Эта модель чувствительна также к фактору убыли. Трудно определить, одинаково ли восприятие объекта исследования у тех респондентов, которые выбыли в про- [c.289]
Модель эксперимента, в дополнение к контролю остальных посторонних факторов также и надежный контроль за интерактивным эффектом тестирования. [c.289]
Проведение серии измерений до и после независимого фактора обеспечивает по крайней мере частичный контроль за некоторыми посторонними факторами. В частности, такой контроль обеспечивается для фактора зрелости в единицах поскольку этот фактор не может избирательно влиять лишь на результаты отдельных измерений, скажем, и но повлияет и на результаты всех остальных измерений. Поэтому можно считать контролируемыми факторы эффекта тестирования, инструментария и статистической регрессии. Если единицы наблюдения отбираются случайным образом или из аналогичных пар, то отклонение отбора можно значительно сократить. Несколько проблематичен фактор убыли, однако и его можно нивелировать, предложив респондентам вознаграждение за участие в опросе либо применив какие-либо другие стимулы. Основной недостаток модели временных рядов — отсутствие контроля исторического фактора. Другой недостаток — невозможность устранения влияния интерактивного эффекта тестирования, поскольку проводится неоднократное измерение факторов-характеристик на базе одних и тех же респондентов. Тем не менее эта модель весьма полезна, что и подтверждается примером. Эффективность пробного рекламного ролика (X) после его трансляции заданное количество раз можно на основе опроса заранее определенной экспериментальной выборки респондентов. Хотя следователь устанавливает время и частоту трансляции ролика, он тем не менее не может уверенно утверждать, сколько раз и где его прослушал каждый отдельный респондент из выборки, Покупки респондентов из выборки регистрируются до, во время и после трансляции ролика, чтобы определить, имеет ли последний кратковременный, долговременный или нулевой эффект на покупательское поведение респондентов. [c.290]
Структурный капитал — это формы, методы, структуры, позволяющие эффективно осуществлять сбор, тестирование, организацию, фильтрацию, сохранение и распределение существующего знания. Он позволяет привести имеющиеся знания сотрудников в систему и использовать их наиболее эффективно, сделать знания отдельных сотрудников доступными для всех, хранить и передавать информацию с необходимой скоростью, достичь синергического эффекта от совместной деятельности. Стюарт определяет структурный капитал как организационные способности организации отвечать требованиям рынка [8, с. 127 , отмечая, что он, так же, как и человеческий, существует лишь в контексте ракурса, стратегии, конечной цели. В отличие от человеческого капитала — знаний, принадлежащих каждому отдельному сотруднику, — структурный капитал принадлежит организации в целом. Его можно воспроизводить, выявлять долевое участие в нем. В. его состав включаются технологии, изобретения, базы данных, публикации, процессы и т.д., которые могут быть документально оформлены и юридически защищены также сюда относятся стратегия и культура организации, структуры и системы, организационные процедуры и т.п. Все перечисленные и иные элементы структурного капитала делятся на две группы — электронные и социальные (вырастают из личного общения людей — нормы отношений, взаимообогащение жизненным опытом). Стюарт особо отмечает, что структурный капитал может принимать самые разные формы в зависимости от конкретной компании. Основная задача управления структурным капиталом — сделать знания сотрудников собственностью компании и сохранить их в этом качестве. [c.58]
Распознать подстройку легко. Она возникает при нарушении правил тестирования и оптимизации. Подстройку всегда можно определить по ее эффектам результаты, которые торговая модель будет показывать в реальной торговле, будут отличаться от результатов, полученных при оптимизации. [c.160]
Количество подготовленных информационных продуктов Базовые информационные продукты справка о результатах исследования, стратегическая концепция, тактический план, сценарий акции, рабочая смета На основе уровня выполнения поставленных заказчиком задач. На основе тестирования подготовленного информационного продукта на предмет соответствия действительности. На основе эффекта от использования информационного продукта [c.197]
Ф Эксперименты и тестирование. Компания имеет возможность провести эксперимент, увеличив затраты на рекламу в одном из регионов, что позволяет оценить эффект дополнительных инвестиций. Но насколько показательны сами испытания и район их проведения Как оценивается экономическое положение в сравниваемых регионах Достаточна ли длительность эксперимента для оценки долгосрочных эффектов [c.336]
График работ. Одной из ключевых задач любого проекта является получение продукта разработки к определенной дате. При этом предполагается, что экономический эффект продукта связан с датой его доступности. Многие из связей между надежностью и стоимостью ПО также существенны и для графика работы и надежности. Одной из основных причин изменения графиков работ являются задачи обеспечения заданной надежности. Например, имеет место тенденция недооценивать время, необходимое для тестирования. Однако фактическое время тестирования тесно связано с числом ошибок ПО, оставшихся в продукте. Отсюда задача получения приемлемой надежности в ограниченное время может быть достигнута при условии, что выделенного времени достаточно для проектирования. [c.110]
При оценке сложных проектов ПО для сокращения времени на кодирование, отладку, тестирование и сопровождение основным критерием является простота. Эффекта простоты можно достичь, разделив систему на отдельные части с таким расчетом, чтобы изучение, реализация [c.123]
С другой стороны, все системы дают тот или иной процент убыточных входов, и трейдер должен быть уверен в том, что конкретный проигрыш -это неизбежная дань статистике, а не признак порочности системы. В противном случае опять начнутся дерганья, выборочное следование системе и прочие эффекты, открывающее дорогу к быстрой и уверенной потере депозита- Такая уверенность в системе может быть основана только на результатах ее тестирования, о чем мы скажем ниже. [c.302]
Если замысел не сработает, то вы всегда сможете сгладить негативный эффект неудачи, сказав клиентам или партнерам, что это было, например, предложение, ограниченное во времени . Также важно в этом случае объяснить руководству, почему идея не пошла . Вам необходимо очень тщательно проанализировать все причины неудачи и сделать правильные выводы. То, что идея не дала ожидаемых результатов в короткий период времени, может быть следствием именно недостатка времени на ее тестирование [c.53]
Многоканальное кабельное тестирование основное по достоверности тестирования, поскольку позволяет рекламодателю экспериментально проконтролировать воздействие других элементов маркетинга и точно измерить эффект рекламы в короткий период продаж. Однако, как уже было сказано, это может стоить в 20-50 раз дороже, чем тест принудительного рекламного воздействия (от 100 тысяч до 200 тысяч долл.) и потребовать от шести месяцев до одного года или больше времени до того, как будут известны результаты. К этому времени появление новых марок или изменение выбора потребителя могут привести к тому, что эти результаты несколько устареют. Далее, результаты продаж сами по себе, если рассматривать их отдельно, не дают путеводную нить к пониманию длительного воздействия рекламы на ценность марки или престиж. По этим причинам большинство фирм гораздо меньше используют многоканальное кабельное тестирование, чем другие методы. [c.480]
Исходя из огромного массива альтернативных методов и фирм обслуживания тестирования рекламы, возникает вопрос, как сделать разумный выбор. Основной вопрос заключается в том, является ли конкретный тест обоснованным и надежным. По отношению к обоснованности следует учитывать три главных фактора. Во-первых, тест должен измерять то, что компания желает получить. Тест, предназначенный для определения одной задачи (например, запоминаемости) отличается от теста, предназначенного для определения другой задачи (например, убедительности). Во-вторых, субъекты теста должны быть представителями целевых групп населения. В-третьих, реакция субъектов на ситуацию тестирования, которая может внести погрешность в результаты, должна быть сведена к минимуму. Проблемы обоснованности теста рекламы обычно фокусируются на соответствии измерений отклика, эффекте реакции (или подопытного кролика) участвующих в эксперименте людей (особенно, если обстановка показа рекламы неестественна и когда требуется измерение отношения), использовании моделей и представительности группы участников тестирования. [c.497]
Второй способ определения этой зависимости основан на проведении экспериментов с помощью метода многоканального тестирования, благодаря которой имеется возможность отслеживать количество рекламы, просматриваемой заранее определенными группами потребителей, и количество приобретаемых ими товаров. Такого рода исследования оцениваются достаточно высоко с точки зрения их надежности и возможности оперативного управления, однако, они довольно дорогостоящие, не позволяют получить достаточное количество данных о влиянии рекламы на розничную торговлю и могут длиться от шести месяцев до двух лет — в зависимости от сложностей, связанных с количественным измерением долгосрочных эффектов. [c.592]
ПРИМЕЧАНИЕ. Ставшие столь модными в последнее время системы тестирования кандидатов на рабочие места, призванные способствовать оптимальному и более качественному подбору персонала и тем самым призванные в значительной мере устранить проблему текучести кадров на производстве, - все эти системы не приносят ожидаемого эффекта именно в силу того, что представляют собой попытки "исследовать" сознание испытуемых, чтобы любой руководитель смог в дальнейшем на основе полученных результатов в той или иной мере предвидеть поведение своих подчиненных. Но при этом не учитывается одно важное обстоятельство, отныне ставшее для нас очевидным, а именно - ситуация "кандидат на работу" предполагает у ее участника наличие вполне определенных интересов, которые коренным образом [c.187]
Первые три параметра традиционно учитываются во всех системах бизнес-планирования, описанного в предыдущем разделе. Что касается четвертого параметра, то определение побочных эффектов — необходимый этап тестирования (например, новых лекарств), но часто упускается при анализе эффективности стратегических программ в других сферах бизнеса. Между тем примеров неожиданных побочных эффектов очень много. Например, организация проводит блестящую маркетинговую кампанию, достигает 70% доли рынка, и ее начинают ограничивать антимонопольные органы, в борьбе с которыми теряется вся заработанная дополнительная прибыль. Могут быть ситуации и положительных побочных эффектов. [c.375]
Оценка эффективности рекламной кампании (тестирование, исследование факторов, влияющих на размер рекламного бюджета, определение затрат и ожидаемого эффекта, расчет эффективности). [c.555]
Предварительное тестирование и эффект занижения 407 [c.407]
Интерактивный эффект тестирования (intera tive testing effe t — IT) заключается в том, что предварительная оценка влияет на реакцию единиц наблюдения на независимую переменную. Возвращаясь опять к примеру с экспериментом по оценке эффективности рекламы, необходимо отметить, что просьба к респондентам оценить свое отношение к данной торговой марке привлекла к ней их внимание. После этого естественна их большая готовность обратить внимание на ее рекламу по сравнению с теми, кто не участвовал в предварительном опросе. Полученные результаты нельзя будет распространить на всю генеральную совокупность, следовательно, интерактивный эффект тестирования нарушает внешнюю достоверность эксперимента. [c.280]
В приведенном примере исследователь может пренебречь фактором отдельных единиц наблюдения. Если же последний представляется существенным, лучше модель четырех групп Соломона (Solomon four-group Она свободна от недостатков двух выше рассмотренных моделей, поскольку, кроме контроля других посторонних факторов позволяет осуществлять контроль интерактивного эффекта тестирования. Тем не менее и эта модель имеет определенные недостатки. Она требует значительных затрат времени и денег. Поэтому подробно она не рассматривается [17]. [c.289]
Описанная функция InfoDesk — не единственная. Здесь есть раздел часто задаваемых вопросов (FAQ), благодаря которому сокращается число повторов в обращениях есть ссылки на другие ресурсы корпоративной сети, являющиеся богатым источником знаний для сотрудников службы сбыта. За три года работы в базе данных InfoDesk накопилось около 20 тысяч вопросов с ответами. Эта сокровищница информации помогает не только с поиском ответов на конкретные вопросы, но и с выявлением тенденций. Анализ обращений помогает совершенствовать наш веб-сайт, например создавая новые категории и страницы, посвященные таким темам, как проблема 2000 года. Особенно большой эффект приносит использование его для контроля за ходом бета-тестирования продуктов. Вопросы с мест помогают вносить улучшения в продукты, совершенствовать документацию, а также разрешать многие вопросы лицензирования и ценообразования еще до начала широкого распространения продукта. [c.257]
На третьем уровне оценивания модели — в форвардном анализе — о модели судят исключительно по совокупной эффективности постоптимизационной торговли, полученной в серии отдельных форвардных тестов. Одна очень сильная сторона этого уровня тестирования — статистическая значимость, обеспечиваемая его полнотой и возможностями. Другое его достоинство — получение ценной информации об эффекте воздействия на эффективность изменениями трендов и волатильности. [c.140]
О системе обучения рассказывает ее организатор со стороны консультантов А. В. Глазунов, к.т.н., зам. директора СМЦ Приоритет Это были не обычные учебные занятия промышленников, а курсы по подготовке учителей, т. е. специалистов, которые будут не только использовать в своей работе статметоды, но и обучать коллег. Эта особенность наложила отпечаток на программу. Она состояла из трех частей. Первая — двухнедельный интенсивный теоретический курс с тестированием. Вторая часть — месяц для самостоятельной работы слушателей на своих рабочих местах для выполнения практических курсовых. Третья часть — недельная сессия, в рамках которой проходила публичная защита курсовых работ. Затем была публичная защита испытательных лекций слушателей по одной из тем прошедшего курса. Мы высоко оценили уровень курсовых работ, многие при внедрении могут дать большой экономический эффект. Хотелось бы отметить энтузиазм работников завода . [c.402]
Основываясь на таких исследованиях, некоторые рекламные агентства сперва решают, какие чувства они хотят вызвать в конкретной ситуации, и лишь затем разрабатывают саму рекламу, которая имеет соответствующее содержание и элементы исполнения (тип музыки, визуальные эффекты или известные личности). Далее может быть проведено тестирование с целью проверить, действительно ли эта реклама вызывает требуемые чувства, а также появляются ли какие-то незапланированные чувства. Некоторые из методов получения требуемых чувств и их проверки приведены в главе 14. Например, агентство BBDO использует карту с лицами людей, на каждом из которых представлено свое эмоциональное состояние. Мак-Кэн—Эриксон использует список эмоциональных прилагательных, как это делает Эйер (Ауег). [c.298]
Однако некоторые задачи, особенно задачи коммуникации, неизбежно уникальны по отношению к марке и могут потребовать формулировки специальных вопросов для этой марки. Например, как показано на рис. 14.4, в 1980 году фирма hevron запустила серию из двенадцати печатных реклам, в которых большей частью сообщалось, что hevron имеет гораздо меньший доход, чем люди предполагают [29]. В заключительном тестировании было взято интервью у 380 произвольно выбранных респондентов. Изменение доверия к марке определялось по пункту " hevron получает слишком высокие доходы" для тех, кто был знаком с рекламой фирмы. Эффект рекламы был невелик, поскольку процент согласных с приведенным утверждением снизился с 81 до 72%. [c.483]
В обычной прикладной эконометрической практике выбирается та же оценка /3, однако эффект предварительного тестирования игнорируется, оценка считается несмещенной и матрица среднеквадратичных отклонений оценки берегся равной матрице кова-риаций оценки /3, рассчитанной в предположении верности выбранной модели (см. теорему 14. 1)4 [c.407]