Энциклопедия маркетинга. Как поддержать интерес интервьюера в проекте отслеживания

Пилотное исследование

878 Когда у меня накопилась первая партия гороскопов, я сначала занялся соединениями d и оппозициями с? солнца и луны3 - двумя аспектами, которые в астрологии считаются равносильными (хотя и с противоположным смыслом), то есть обозначающими интенсивные отношения между небесными телами. Вместе с соединениями и оппозициями, Марс, Венера, Асц. и Десц. они представляют пятьдесят различных аспектов.4

879 Причины, по которым я выбрал именно эти комбинации, станут ясны читателю из замечаний касательно астрологи­ческих традиций, сделанных мною в предыдущей главе. Что касается соединений и оппозиций, то здесь мне остается только добавить, что эти аспекты Марса и Венеры гораздо менее важны, чем остальные, что вполне ясно следует из следующᴇᴦο факта: отношения Марса с Венерой могут указывать на любов­ную связь, но брак - ϶то не всегда любовная связь, а любовная связь - ϶то не всегда брак. По϶тому я включил соединение и оппозицию Марса и Венеры только потому, что хотел сравнить их с другими соединениями и оппозициями.

880 Поначалу эти пятьдесят аспектов были исследованы применительно к 180-ти брачным парам. Разумеется, что эти 180 мужчин и 180 женщин могли быть перемешаны и в неженатые пары. Понятно, что в случае если любой из 180-ти мужчин мог быть соединен в пару с любой из 179-ти женщин, помимо ᴇᴦο жены, то мы, фактически, можем изучать 180 х 179 = 32 220 неженатых пар в рамках 180-ти браков. Это и было сделано (сравни с Таблицей 1), и анализ аспектов неженатых пар сравнивался с аспектами брачных пар.
Размещено на реф.рф
Для всех расчетов брался орбис в 8 градусов, по часовой стрелке и против часовой стрелки, не только в границах знака, но и за ᴇᴦο пределами. Впоследствии к первой партии были добавлены ещё две, по 220 и 83 брака соответственно, так что всᴇᴦο было изучено 483 брачных пары или 966 гороскопов. В первой партии наиболее часто встречалось соединение солнце-луна (10 %), во второй -соединение луна-луна (10, 9%), а в третьей - соединение луяа-Асц. (9,6%).

881. Меня, естественно, прежде всᴇᴦο интересовал вопрос вероят­ности: были ли полученные нами максимальные результаты "значимыми" цифрами или нет?; то есть были они вероятными или нет? Сделанные математиком расчёты категорически ука­зывали на то, что средняя для всех трех партий цифра в 10 % далека от того, чтобы быть значимой. Ее вероятность чересчур велика; иными словами, нет никаких оснований для предполо­жения, что наши лучшие результаты являются чем-то большим, чем просто дисперсиями случайнои̌ величины.

Пилотное исследование - понятие и виды. Классификация и особенности категории "Пилотное исследование"2017-2018.

Термин «пробное исследование» в литературе употребляется как: 1) синоним поискового (разведывательного) исследования; 2) синоним пилотажного исследования; 3) собирательное понятие, включающее как свои разновидности (подвиды) поисковое (разведывательное) и пилотажное исследования. Будем считать, что поисковое (разведывательное) и пилотажное - два основных под­вида пробного исследования.

Поисковое (разведывательное) исследование проводится с целью уточнения проблемы, более корректной постановки задач и выд­вижения обоснованных гипотез. Таким образом, по своей сути оно есть концептуальное исследование. Проведение его особенно же­лательно в том случае, если литература по интересующей вас те­матике отсутствует или ее недостаточно.

Разведывательное исследование - наиболее простой вид соци­ологического анализа: круг задач ограничен, число опрошенных невелико, программа и инструментарий крайне упрощенные; дан­ные нерепрезентативные. Ученый получает лишь прикидочные све­дения об объекте исследования для общей ориентации в проблеме. Оно используется для мало изученных или вообще не изученных проблем. Его лозунг - приблизительно, дешево и быстро.

Поисковое исследование может проводиться следующими ме­тодами: интервью (лучше неформализованное) с потенциальными респондентами; наблюдение; фокус-группа по центральной пробле­ме исследования; опрос экспертов - специалистов или просто лю­дей, имеющих отношение к интересующей вас проблемной облас­ти; изучение документов, статистических данных, содержащих не­обходимые сведения по выдвинутым задачам и гипотезам.

Вариантом разведывательного исследования выступают эксп­ресс-опросы. Их еще называют оперативными опросами. Ими пользуются многочисленные опросные фирмы - от ВЦИОМ до РОМИР. Правда, опросы они проводят, как правило, очень гра­мотные, но глубоких научных задач развития фундаментальной науки не ставят. Решаются сиюминутные, но очень нужные об­ществу, ведомству или частному заказчику утилитарные задачи: как народ относится к президенту, запрещению абортов, войне в Чечне, приезду Буша, террористическим актам 11 сентября 2001 г. Таким образом получают свежую, недолговечную (срок ее жизни исчисляется днями, неделями, реже месяцами), но очень нужную в данный момент информацию.

Разведывательное исследование часто называют также пило­тажным исследованием. Хотя правильнее считать его самостоя­тельным видом социологического исследования. Разведыватель­ное и пилотажное исследования похожи в двух аспектах:

♦ Цель - получить примерные данные о том или ином явле­нии либо апробировать применение методики к более широкомас­штабным исследованиям.

♦ Объект - для проведения того и другого исследования нуж­на незначительная совокупность объектов, поэтому они проводят­ся в ограниченные сроки.

Но в отличие от разведывательного, пилотажное исследование предназначено для отработки технических процедур и приемов, чаще всего - для апробации вопросника. Предварительная про­верка опросного инструментария столь же важна для успеха ис­следования, считают Дж. Мангейм и Р. Рич, как пробная поезд­ка - для успешной покупки подержанного автомобиля. Она по­могает обнаружить проблемы, которые в полной мере могут проявиться только в полевых условиях.

В социологии пилотаж проводится до основного исследования и выступает способом проверки обоснованности гипотез и задач, а также профессионального уровня и методической отработанности инструментария. Пилотаж помогает оценить правильность модели выборки и внести в нее в случае необходимости соответствующие исправления; уточнить некоторые характеристики объекта и предмета исследования, обосновать финансовые расходы и сроки проведения главного исследования. Пилотаж полезен также для тренировки группы интервьюеров (анкетеров).

Пилотаж полезен для: а) тестирования инструментария, в котором исследователь вполне уверен, б) усовершенствования инструментария в ситуации, когда предмет исследования хуже известен исследователю. В первом случае инструментарий проходит предварительное испытание в своем окончательном варианте. Во втором- исследователь может захотеть поэкспериментировать с разными вариантами (макетами) инструмента, чтобы узнать, ка­кой из них удобнее в работе.

Эта статья посвящена тому, как убедиться, что проводимое вами — обязательный инструмент в арсенале каждого разработчика и оптимизатора конверсии — оправдывает свое предназначение на 100%.

Качественное исследование пользователей позволяет получить глубокое и содержательное понимание особенностей их поведения, привычек и т.д. К сожалению, проведение подобного рода исследований намного сложнее, чем это может показаться на первый взгляд. Вероятно, каждый, кто проводил такие эксперименты, сталкивался с тем, что:

• в ходе исследования участники не понимают, что от них требуется и что они должны сделать;
• формулировки ваших вопросов наталкивают участников на определенный ответ либо являются причиной искажения результатов;
• в течение эксперимента участники не успевают выполнить задачу за отведенное время;
• после проведения эксперимента больше времени отнимает анализ структуры эксперимента, а не его результатов.

Если с вами случалось нечто подобное, не пугайтесь. Вы не одиноки. Даже самые опытные исследователи время от времени совершают промашки.

К счастью, есть способ, который поможет вам избежать неудачного эксперимента: .

Пилотное тестирование — это своего рода репетиция, позволяющая проверить исследовательский подход на небольшом количестве участников. Хотя пилотное тестирование и является дополнительным шагом, оно может сэкономить вам кучу времени и ресурсов, если вы вдруг обнаружите недочеты.

Поскольку корректное проектирование эксперимента является непременным условием его проведения, важно найти время на оценку, тестирование и доработку дизайна до его запуска. Поступая таким образом, вы можете гарантировать, что ваше исследование пользователей пройдет гладко, а вы получите от него максимальный эффект.

Самое интересное, что пилотное тестирование может быть применено для всех подходов.

Начните с процесса

Для любого подхода к исследованию, какой бы вы не выбрали, характерны следующие этапы:

1. Разработка определенного исследовательского подхода (методология, инструменты, профиль целевого участника).

2. Пилотное тестирование эксперимента.

3. Подбор квалифицированных участников исследования.

4. Проведение исследования.

5. Анализ результатов.

6. Формирование выводов по результатам исследования.

Любое исследование следует начинать с вопроса «Что мы намереваемся узнать?». Вы можете руководствоваться этим вопросом при разработке методологии исследования, выборе инструментов, определения профиля участников. Пилотное же тестирование позволит быстро проверить проект исследования и улучшить его.

Обычно пилотное тестирование состоит из двух этапов: 1) проработка структуры; 2) проведение тестирования.

В ходе первого этапа организаторы стараются рассмотреть каждый аспект планируемого эксперимента. Вот что подлежит анализу:

• цели высокого уровня или то, что исследователи стремятся узнать;
• инструменты, которые планируется использовать;
• задачи, которые будут выполнять участники;
• вопросы участникам;
• размер выборки;
• профиль участника.

Нередко много времени занимает обсуждение вопросов, которые будут заданы участникам эксперимента. Рассмотрению подлежит огромное число вариантов. Такое часто случается из-за страха упустить что-то важное, что потом не позволит сделать какой-либо важный вывод. Как итог: каждое из заинтересованных в результатах исследования подразделений старается задать участнику какой-то свой вопрос.

Однако надо сказать, что такой подход опасен. Это может привести к тому, что команда просто упустит из виду главную цель, ради которой, собственно, и проводилось исследование; а также получит такие данные, которые потом будет трудно интерпретировать, тем самым ограничив количество генерируемых практических выводов.

Чтобы избежать подобного, стоит обратить внимание на следующий подход на этапе подготовке вопросов:

Фаза 1: сначала группа исследователей составляет список потенциальных вопросов. Они затем будут более тщательно рассмотрены на этапе проработки структуры исследования. Цель состоит в том, чтобы создать небольшой пул вопросов, которые будут понятны, не будут наталкивать участника на тот или иной ответ, будут дополнять друг друга. В результате большая их часть из первоначального списка оказывается удалена, а то, что осталось — переработано.

Фаза 2: вторая часть заключается в проведении пилотного тестирования.

Эти исследования не отнимают много времени и проводятся многократно с привлечением одного или двух участников. Основываясь на ответах респондентов, оценивают эксперимент, вносят правки и повторно тестируют.

Исследователи повторяют этот процесс до тех пор, пока не будут обнаружены все ошибки.

Существуют различные критерии, которые можно использовать для тестирования, но рекомендуется придерживаться трех основных: ясность инструкций, задачи участника и вопросы к нему, время исследования:

• ясность инструкций: инструкции не должны вводить в заблуждение и вызывать недопонимание;
• тестирование заданий и вопросов: включает в себя тестирование рабочего процесса исследования;
• время исследования: отслеживается время выполнения каждой задачи и всего эксперимента.

Пример

Один клиент хотел провести исследование новых областей своего сайта, которые были специально созданы под новый оффер его компании. В частности, он хотел запустить на новом лендинге и вспомогательной странице с контентом, раскрывающем особенности предложения.

При содействии клиента компания разработала бриф, в котором были указаны основные цели эксперимента, целевые участники, бюджет проекта и сроки реализации. Основными целями исследования стали достижение понимания особенностей вовлечения клиента (айтрекинг) на обеих страницах и изучение понимания клиентом нового сервиса.

Ориентируясь на эти цели и бюджет, был разработан исследовательский подход к проекту. Поскольку клиент настаивал на проведении айтрекингового исследования, было решено воспользоваться Sticky, удаленным инструментом для проведения такого рода исследований. Этот сервис был выбран, поскольку он позволяет проводить дистанционные немодерируемые айтрекинговые эксперименты.

Также был задействован сервис Sticky Crowd для подбора участников. Критерии выбора респондентов были взяты из последних исследований, что были проведены самим клиентом.

Используя возможности Sticky, удалось определить методологию исследования и разработать рабочий процесс для участников. Затем был составлен первоначальный список потенциальных вопросов, которые могли бы дополнить айтрекинг.

В ходе проработки структуры эксперимента были рассмотрены рабочий процесс и задачи, сроки их выполнения и финальные вопросы. Было решено использовать открытые вопросы, чтобы не искажать ответы участников, и ограничить их количество до пяти.

Вопросы были взяты из первоначального списка и переработаны так, чтобы они дополняли друг друга и были направлены на достижение поставленных целей, в частности — изучение того, как люди восприняли новый сервис.

После этого был дан старт пилотному тестированию.

Поскольку средства платформы Sticky не позволяли провести айтрекинговое исследование на двух людях, были использованы другие бесплатные инструменты. Оба респондента соответствовали профилю целевого участника. Тест тут же указал на такие недостатки дизайна, как несовершенство инструкции, которая вызывала путаницу и замешательство, и недостаточное время для выполнения задач.

Инструкция не обеспечивала участников достаточной контекстуальной информацией в отношении того, что надо искать, и, как итог, люди не понимали, какие следовало предпринимать действия. Также исследователи предполагали, что 5 секунд вполне хватит каждому участнику, чтобы успеть ознакомиться с содержимым каждой страницы. Однако размещенный контент был весьма разнообразен, и 5 секунд явно было мало, чтобы люди успевали просмотреть всю страницу.

После внесения корректировок был организован и проведен второй пилотный тест с другими двумя участниками. Изменения в дизайне позволили решить возникшие на предыдущем раунде тестирования проблемы.

Второе пилотное тестирование не только подкрепило уверенность исследователей, что можно переходить к проведению основного эксперимента, но и привело к так называемому «ага!»-моменту, прозрению.

Пилотные тесты дали понять, что у участников были определенные ожидания касательно функциональной стороны каждой страницы, которую они посещали. Например, респонденты ожидали, что главная задача лендинга — захватить их внимание и перевести на страницу с сервисом, где, как они думали, им будет представлено больше информации о нем и как его использовать в своей работе. Эти выводы изменили стратегический подход для организации обеих страниц.

Иногда предварительное тестирование действительно может озарить вас какими-то новыми идеями, позволить увидеть то, что раньше вы просто не замечали. Это приятный бонус проведения таких исследований, но надо помнить, что любую новую идею нужно проверять путем проведения дополнительных тестов.

Заключение

Проведя пилотное тестирование, вы не только улучшите выводы, полученные от одного проекта, но и сам процесс проведения исследований.

Рефлективная и итерационная природа пилотных тестов ускорит развитие ваших навыков исследователя.

Хоть пилотный тест и требует дополнительного времени и ресурсов, но поверьте, что эта небольшая инвестиция позволит получить гораздо более значительные результаты в следующем исследовательском проекте и даже за его пределами.

Высоких вам конверсий!

По материалам:

В интернете много материалов на тему пользы и вреда пальмового масла для человеческого организма, но большинство почему то грешат некоторой однобокостью, не видят комплексную проблему, к тому же часто содержат распространенные обывательские мифы. Давайте разбираться.

Подписаться на новости

Пилотное исследование предназначено для получения предварительных данных, важных для планирования дальнейших этапов исследования (определение возможности проведения исследования у большего числа испытуемых, размера выборки в будущем исследовании, необходимой мощности исследования и т.д.).

Рандомизированное клиническое исследование , в котором пациенты распределяются по группам лечения случайным образом (процедура рандомизации) и имеют одинаковую возможность получить исследуемый или контрольный препарат (препарат сравнения или плацебо). В нерандомизированном исследовании процедура рандомизации не проводится.

Контролируемое (иногда используется синоним «сравнительное») клиническое исследование , в котором исследуемое лекарственное средство, эффективность и безопасность которого до конца еще не изучены, сравнивают с препаратом, эффективность и безопасность которого хорошо известны (препарат сравнения). Это может быть плацебо, стандартная терапия или отсутствие лечения вообще. В неконтролируемом (несравнительном) исследовании группа контроля / сравнения (группа испытуемых, принимающих препарат сравнения) не используется. В более широком смысле под контролируемым исследованием имеется в виду всякое исследование, в котором контролируются (по возможности минимизируются или исключаются) потенциальные источники систематических ошибок (т. е. оно проводится в строгом соответствии с протоколом, мониторируется и т.д.).

При проведении параллельных исследований испытуемые в различных группах получают либо только изучаемое лекарственное средство, либо только препарат сравнения / плацебо. В перекрестных исследованиях каждый пациент получает оба сравниваемых препарата, как правило, в случайной последовательности.

Исследование может быть открытым , когда все участники исследования знают, какой препарат получает пациент, и слепым (замаскированным) , когда одна (простое слепое исследование) или несколько сторон, принимающих участие в исследовании (двойное слепое, тройное слепое или полное слепое исследование) держатся в неведении относительно распределения пациентов по группам лечения.

Проспективное исследование проводится с делением участников на группы, которые будут или не будут получать исследуемое лекарственное средство, до того, как наступили исходы. В отличие от него, в ретроспективном (историческом) исследовании изучаются исходы проведенных ранее клинических исследований, т.е. исходы наступают до того, как начато исследование.

В зависимости от количества исследовательских центров, в которых проводится исследование в соответствии с единым протоколом, исследования бывают одноцентровыми и многоцентровыми . Если исследование проводится в нескольких странах, его называют международным.

В параллельном исследовании сравниваются две или более группы испытуемых, одна или более из которых получают исследуемый препарат, а одна группа является контрольной. В некоторых параллельных исследованиях сравнивают различные виды лечения, без включения контрольной группы. (Такой дизайн называют дизайном независимых групп).

Когортное исследование — это обсервационное исследование, в котором выделенную группу людей (когорту) наблюдают в течение некоторого времени. Исходы у испытуемых в разных подгруппах данной когорты, тех кто подвергался или не подвергался (или подвергался в разной степени) лечению исследуемым препаратом сравниваются. В проспективном когортном исследовании когорты составляют в настоящем и наблюдают их в будущем. В ретроспективном (или историческом) когортном исследовании когорту подбирают по архивным записям и прослеживают их исходы с того момента по настоящее время.

В исследовании случай-контроль (синоним: исследование сходных случаев) сравнивают людей с определенным заболеванием или исходами («случай») с людьми из этой же популяции, не страдающими данным заболеванием, или у которых не наблюдался данный исход («контроль»), с целью выявления связи между исходом и предшествующему воздействию определенных риск-факторов. В исследовании серии случаев наблюдают несколько индивидуумов, обычно получающих одинаковое лечение, без использования контрольной группы. В описании случая (синонимы: случай из практики, история заболевания, описание единичного случая) ведется исследование лечения и исхода у одного человека.

В настоящее время предпочтение отдается такому дизайну клинического исследования лекарственных средств, при котором обеспечивается получение наиболее достоверных данных, к примеру, при проведении проспективных контролируемых сравнительных рандомизированных и, желательно, двойных слепых исследований.

В последнее время роль клинических исследований лекарственных средств возросла в связи с внедрением в практическое здравоохранение принципов доказательной медицины. И главным среди них является принятие конкретных клинических решений для лечения пациента на основе строго доказанных научных данных, которые могут быть получены в ходе хорошо спланированных, контролируемых клинических исследований.

Противоопухолевых препаратов различаются, каждое из них проводится для конкретно поставленных целей и подбирается под необходимые параметры для исследования препарата. На настоящий момент выделяют следующие виды клинических исследований:

Открытое и слепое клиническое исследование

Клиническое исследование может быть открытым и слепым. Открытое исследование - это когда и врач, и его пациент знают, какой препарат исследуется. Слепое исследование делится на простое слепое, двойное слепое исследование и полное слепое исследование.

• Простое слепое исследование - это когда одна сторона не знает, какой препарат исследуется.
• Двойное слепое исследование и полное слепое исследование - это когда две или более стороны не обладают информацией относительно исследуемого препарата.

Пилотное клиническое исследование проводится для получения предварительных данных, важных для планирования дальнейших этапов исследования. На простом языке можно было бы назвать его «пристрелочным». С помощью пилотного исследования определяется возможность проведения исследования на большем числе испытуемых, рассчитываются необходимые мощности и финансовые затраты для будущего исследования.

Контролируемое клиническое исследование - это сравнительное исследование, в котором новый (исследуемый) препарат, эффективность и безопасность которого еще до конца не изучены, сравнивают со стандартным способом лечения, то есть препаратом, уже прошедшим исследования и вышедшим на рынок.

Пациенты в первой группе получают терапию исследуемым препаратом, пациенты во второй – стандартным (эта группа называется контрольной , отсюда название вида исследования). Препаратом сравнения может быть как стандартная терапия, так и плацебо.

Неконтролируемое клиническое исследование - это исследование, в котором нет группы испытуемых, принимающих препарат сравнения. Обычно такой вид клинических исследований проводится для препаратов с уже доказанной эффективностью и безопасностью.

Рандомизированное клиническое исследование - это исследование, в котором пациенты распределяются на несколько групп (по видам лечения или схеме приема препарата) случайным образом и имеют одинаковую возможность получить исследуемый или контрольный препарат (препарат сравнения или плацебо). В нерандомизированном исследовании процедура рандомизации не проводится, соответственно пациенты не разделяются по отдельным группам.

Параллельные и перекрестные клинические исследования

Параллельные клинические исследования - это исследования, при которых испытуемые в различных группах получают либо только изучаемое лекарственное средство, либо только препарат сравнения. В параллельном исследовании сравниваются несколько групп испытуемых, одна из которых получает исследуемый препарат, а другая группа является контрольной. В некоторых параллельных исследованиях сравнивают различные виды лечения, без включения контрольной группы.

Перерекрестные клинические исследования – это исследования, в которых каждый пациент получает оба сравниваемых препарата, в случайной последовательности.

Проспективное и ретроспективное клиническое исследование

Проспективное клиническое исследование – это наблюдение за группой больных в течение длительного времени, до наступления исхода (клинически значимого события, которое служит объектом интереса исследователя – ремиссия, ответ на лечение, возникновение рецидива, летальный исход). Такое исследование является самым достоверным и поэтому проводится чаще всего, причем в разных странах одновременно, другими словами, оно является интернациональным.

В отличие от проспективного исследования, в ретроспективном клиническом исследовании , напротив, изучаются исходы проведенных ранее клинических исследований, т.е. исходы наступают до того, как началось исследование.

Одноцентровое и многоцентровое клиническое исследование

Если клиническое исследование проходит на базе одного исследовательского центра, оно называется одноцентровым , а если на базе нескольких, то многоцентровым . Если же, исследование проводится в нескольких странах (как правило, центры расположены в разных странах), его называют международным .

Когортное клиническое исследование – это исследование, в котором выделенную группу (когорту) участников наблюдают в течение какого-то времени. По окончании этого времени результаты исследования сравниваются у испытуемых в разных подгруппах данной когорты. На основании этих результатов делается вывод.

В проспективном когортном клиническом исследовании группы испытуемых составляют в настоящем времени, а наблюдают в будущем. В ретроспективном когортном клиническом исследовании группы испытуемых подбирают на основании архивных данных и прослеживают их результаты по настоящее время.

Какой вид клинического исследования будет наиболее достоверным?

В последнее время, фармацевтические фирмы обязывают проводить клинические исследования, при которых получаются самые достоверные данные . Чаще всего удовлетворяет таким требованиям проспективное двойное слепое рандомизированное многоцентровое плацебо-контролируемое исследование . Это значит, что:

• Проспективное – будет вестись наблюдение в течение длительного времени;
• Рандомизированное – пациентов случайно распределили по группам (обычно это делает специальная компьютерная программа, чтобы в итоге различия между группами стали несущественными, то есть статистически недостоверными);
• Двойное слепое - ни врач, ни пациент не знает, в какую группу пациент попал при рандомизации, поэтому такое исследование максимально объективно;
• Многоцентровое – выполняется сразу в нескольких учреждениях. Некоторые виды опухолей чрезвычайно редки (например, наличие ALK-мутации при немелкоклеточном раке легкого), поэтому в одном центре сложно найти необходимое количество пациентов, соответствующих критериям включения в протокол. Поэтому такие клинические исследования проводятся сразу в нескольких исследовательских центрах, причем как правило, в нескольких странах одновременно и называются международными;
• Плацебо-контролируемое – участники делятся на две группы, одни получают исследуемый препарат, другие – плацебо;