Маркетинговые исследования

Цели, задачи и основные понятия маркетинговых исследований. Определение потребности предприятия в маркетинговых исследованиях, формулирование целей, выбор методов их проведения. Выбор конкретных методов опроса, способы получения данных от респондентов.

Рубрика Маркетинг, реклама и торговля
Вид дипломная работа
Язык русский
Дата добавления 18.02.2013
Размер файла 447,2 K

Отправить свою хорошую работу в базу знаний просто. Используйте форму, расположенную ниже

Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.

3. Отсутствие определенного влияния со стороны интервьюера или компьютера, создающее более комфортные условия для респондентов для ответа на вопросы.

Недостатки данного метода опроса, прежде всего, заключаются в том, что поскольку респондент самостоятельно контролирует ответы на вопросы анкеты, то его ответы могут содержать ошибки, обусловленные недопониманием, отсутствием должного внимания, быть неполными; сроки опроса могут нарушаться или анкеты вообще не будут возвращены. В следствие изложенного анкеты должны разрабатываться самым тщательным образом, содержать ясные и полные инструкции.

Интервьюер должен хорошо представлять себе общие цели исследования, его замысел, быть общительным по характеру, но спокойным и уравновешенным. Импульсивные интервьюеры вкладывают обычно в дело столько эмоций, что это может быть причиной всевозможных отклонений от заданного плана беседы.

Вначале беседы важно создать благоприятную атмосферу для разговора. Вначале интервьюер называет себя и представляемую им организацию, помня, что не надо подчеркивать свою личную заинтересованность в беседе, надо стремиться создать атмосферу некоторой доверительности.

Возможно, что опрашиваемый отказывается вести беседу, ссылаясь на неинформированность, занятость. Надо ему сказать, что вопросы будут простыми, в любую минуту вы можете прервать беседу.

Для "утепления" атмосферы интервьюер может начать разговор с отвлеченных тем: о погоде, о спортивных новостях - о чем угодно, что покажется уместным для установления первого контакта.

Поощрение к ответу на сложные вопросы достигается нехитрыми приемами: внимательный взгляд, одобрительный кивок, поддакивание.

В ходе беседы интервьюер подытоживает логические части беседы. В заключение он может вернуться к некоторым вопросам, на которые получены неполные ответы, и просит кое-что уточнить, ссылаясь на то, что теперь это кажется ему более важным, чем представлялось в ходе разговора.

Когда содержание интервью исчерпано, опрашиваемого просят дать некоторые сведения о себе, подчеркивая, что это надо для общей обработки данных.

Если респондент в ответ на поставленный вопрос интересуется, каково мнение самого интервьюера по этому поводу, последний говорит, что выскажет свои соображения в конце беседы, поскольку они могут изменить ее ход.

2.7.5 Панельный метод обследования

Базовым понятием подобного метода опроса является понятие панели.

Панель - выборочная совокупность опрашиваемых единиц, подвергаемых повторяющимся исследованиям, причем предмет исследования остается постоянным. Членами панели могут быть отдельные потребители, семьи, организации торговли и промышленности, эксперты, которые с определенными оговорками остаются постоянными. Панельный метод опроса имеет преимущества по сравнению с обычными одноразовыми опросами: он дает возможность сравнивать результаты последующих опросов с итогами предыдущих и устанавливать тенденции и закономерности развития изучаемых явлений; обеспечивает более высокую репрезентативность выборки по отношению к генеральной совокупности.

Все виды панелей подразделяются по: времени существования; характеру изучаемых единиц (субъектов); характеру изучаемых проблем (предметов изучения); методом получения информации.

По времени существования панели делятся на краткосрочные (существуют не более года) и долгосрочные (не более пяти лет).

Долгосрочные панели могут давать непрерывную либо периодическую информацию. Непрерывная информация фиксируется в дневниках ежедневно, а сами дневники высылаются организаторам исследования через определенные промежутки времени. Периодическая информация поступает по мере проведения опросов в виде заполненных анкет.

По характеру изучаемых единиц они делятся на панели:

- потребительские, членами, которых выступают индивидуальные потребители, семьи или домашние хозяйства (так, в США фирмой "NFO Research, Inc." создана потребительская панель, включающая 450000 домохозяйств; в России в состав панели домохозяйств, охватывающей все республики, края и области, на добровольной основе входит около 50000 домашних хозяйств);

- торговые, членами, которых являются торговые организации и отдельные лица, занимающиеся торговлей;

- промышленных предприятий, выпускающих исследуемые товары;

- экспертов-специалистов по изучаемой проблеме.

От состава панели в значительной степени зависит информация, полученная при проведении опросов. Наиболее сложно формирование семейной и индивидуальной потребительских панелей. Преимуществом торговых панелей, панелей промышленных предприятий и экспертов является меньшее количество членов по сравнению с потребительскими панелями, что сокращает затраты на их формирование и наблюдение.

По характеру изучаемых проблем панели делятся на специализированные и общие. Специализированные панели могут быть созданы для изучения отдельных товаров или товарных групп. Например, с их помощью осуществляется: тестирование товаров и концепции новых товаров; отслеживание рыночных тенденций, например, изучается динамика показателя рыночной доли; определение источников, из которых потребители получают информацию о новых товарах; тестирование с помощью видеороликов рекламы.

Если общие панели формируются репрезентативными по отношению к составу населения региона, то специализированные панели могут формироваться как выборки из всего населения (всех семей); всех потенциальных потребителей исследуемых товаров; всех действительных потребителей (владельцев) исследуемых товаров.

Специализированная панель может быть также нерепрезентативной, например, может формироваться как панель активистов, т.е. людей, которые располагают определенным товаром и охотно дают о нем информацию. Подобные панели используют для предварительного анализа проблемы.

По методам получения информации возможны четыре вида панели:

1) члены панели высылают требуемую информацию (заполненные дневники, опросные листы) почтой;

2) члены панели интервьюируются;

члены панели заполняют дневники или опросные листы, но собирают информацию специальные работники;

3) члены панели интервьюируются через определенный промежуток времени, а внутри временного интервала высылают информацию по почте.

4) сканерные данные собираются у участников панели, распознаваемых по идентификационной карточке, которая позволяет хранить данные о покупках каждого участника панели. Идентификационную карточку, похожую на кредитную, каждый член семьи обязан предъявить у контрольного прилавка при оплате каждой покупки.

В ходе проведения панельных опросов:

- выявляют факторы и их динамику;

- изучают мнения и оценки, обследуемых относительно товаров и организации торговли, и их изменение во времени;

- выявляют решения и намерения, опрошенных и их реализацию;

- выявляют различия в поведении потребителей, принадлежащих к разным социальным слоям, живущих в разных регионах и городах и населенных пунктах разного типа;

- изучают мотивы покупки и прогнозируют их развитие и др.

Панели подразделяются на традиционные и на нетрадиционные.

К числу последних относятся широко используемые общедоступные, омнибусные панели (omnibus panels). При использовании традиционных панелей одни и те же вопросы задаются участникам панели при каждом обследовании. При использовании общедоступной панели каждое обследование может иметь разные цели, и при этом могут задаваться разные вопросы, причем задается только один или очень ограниченное число вопросов большому числу опрашиваемых. Данный вид панели представляет существующие источники информации, которые могут быть быстро задействованы с самыми разными исследовательскими целями. Получается как бы мгновенная фотография неких мнений, отношений и т.п. Например, маркетолог с помощью данного метода может быстро получить информацию о мнении определенной группы потребителей относительно продукта двух различных марок. На основе же традиционной панели эти же параметры изучаются в динамике; например, на основе изучения динамики покупок определенной марки товара, осуществляемых потребителями отдельных рыночных сегментов, можно исследовать количество проданных товаров, показатель рыночной доли, т. е. рыночные тенденции. Кроме того, можно изучать и изменение отношений потребителей к товару определенной марки, их переключение на использование товара другой марки.

В качестве примера можно назвать Московский телефонный омнибус (МТО) - инструмент, который помогает сравнительно недорого и в сжатые сроки получить ответы на вопросы о ситуации на всем московском рынке. Объем выборки МТО составляет 1000 интервью. Выборка репрезентативна по полу, возрасту, району проживания в Москве. Анкета формируется из блоков вопросов нескольких клиентов, что позволяет значительно снизить стоимость проведения исследования для каждого участника в отдельности. Опрос проводится методом телефонного интервью с использованием компьютеров (CATI).

Целесообразность использования тех или иных панелей определяется характером решаемых задач и выделяемых объемом средств. Поэтому, перед проведением опросов потребителей исходя, из целей исследования необходимо выбрать вид панели.

Большие по объему выборки панели дают более достоверные результаты или, при одинаковой достоверности, меньшие доверительные интервалы. Но более крупные по объему выборки требуют и больших затрат. Поэтому величина панели выбирается с учетом объема панельной выборки и затрат на ее формирование и эксплуатацию.

Задавшись доверительной вероятностью результатов опроса и необходимой точностью оценок, определяют объем панели.

Существуют трудности обеспечения репрезентативности формируемой панели. Помимо общих проблем формирования репрезентативной выборки существуют подобные проблемы, обусловленные тем, что традиционные панели создаются для проведения многократных исследований. Участники панели могут просто отказаться от дальнейшего сотрудничества, переехать в другой город, перейти в другую потребительскую панель, умереть. Кроме того, участники панели, чувствуя себя под контролем, сознательно или бессознательно меняют привычный образ поведения: домашние хозяйки лучше готовятся к закупкам, уменьшается доля спонтанных покупок.

В качестве примера использования панельного метода опроса рассмотрим изучение медицинского обслуживания и рынка лекарств во Франции. В панель входило 1600 врачей (каждый двадцатый врач), работающих с частной клиентурой. Члены панели выписывали в течение одной недели раз в три месяца рецепты в специальной отрывной книжке с корешками. Это позволяло одновременно получать дубликат рецепта и определенную информацию, записанную на корешке: особенности больного, диагноз, терапевтическое воздействие, ожидаемое от выписанного лекарства, и т.д.

Процесс формирования панели в данном примере включал:

- разделение территории на регионы и категории городов;

- разделение медицинского персонала на категории по специальности и возрасту;

- жеребьевку в каждой категории для отбора нужного числа врачей;

- проверку выборки по многим параметрам (звание врача, численность его клиентуры и т. д.).

Кроме того, ежемесячно собирались статистические сведения о продаже лекарств в аптеках (в состав панели входило 307 аптек).

2.7.6 Методы получения данных от респондентов

Можно выделить следующие методы сбора данных при проведении опросов с участием интервьюеров или самостоятельном заполнении анкет респондентами:

1. Интервью, осуществляемое на дому у респондента. Возможно предварительное согласование сроков интервью по телефону.

При этом методе обычно легче установить доверительные отношения, возможен показ образцов товара, рекламных материалов и т.п. Домашняя обстановка настраивает на достаточно длительное интервью с высокой степенью концентрации на проводимом обследовании. Однако это дорогой метод сбора данных.

2. Интервьюирование посетителей крупных магазинов. Компании, проводящие такие обследования, могут в крупных магазинах иметь свои офисы. Посетители магазина опрашиваются интервьюером в помещении магазина или приглашаются для дачи интервью в офис. С помощью данного метода без использования специальных методических подходов трудно обеспечить репрезентативность результатов обследования и вдумчивое отношение опрашиваемых к задаваемым вопросам. По сравнению с первым методом данный метод является более дешевым.

3. Интервью в офисах. Используется обычно при сборе информации о продукции производственно-технического и офисного назначения. Этот метод по существу обладает теми же достоинствами и недостатками, как и первый метод, однако имеет более высокую стоимость проведения, обусловленную использованием более квалифицированных интервьюеров.

4. Традиционное телефонное интервью. К числу достоинств данного метода сбора данных относится следующее: относительно низкая стоимость, возможность охватить большое число респондентов и обеспечить высокий уровень репрезентативности, возможность проведения за относительно короткий период времени. Данному методу присущи следующие недостатки: невозможность что-либо показать респонденту, невозможность интервьюеру иметь личное впечатление от встречи с респондентами. Далее - трудность получения пространных ответов на большое число вопросов, так как терпение респондента может иссякнуть. Кроме того, трудно проверить качество проведенного интервью и установить, все ли запланированные респонденты в реальности были опрошены. Для контроля над качеством проведенного обследования руководство может организовывать повторные проверочные звонки к ранее опрошенным респондентам.

5. Телефонное интервью из специально оборудованного помещения, в котором параллельно работают несколько интервьюеров, к телефонам которых могут подсоединяться контролеры. Помимо хороших возможностей контроля качества работы интервьюеров данный метод по сравнению с традиционным телефонным интервью обеспечивает снижение затрат за счет объединения ресурсов.

6. Телефонное интервью с помощью компьютера. Многие компании, занимающиеся опросом потребителей, помещения, оборудованные для телефонного интервьюирования, оснащают специальной компьютерной техникой. Эта техника осуществляет автоматический набор телефонных номеров респондентов, далее на мониторе появляется вступительный текст, а затем - последовательно задаваемые вопросы с возможными вариантами ответов. Интервьюер последовательно зачитывает респонденту вопросы и с помощью кода фиксирует названный вариант ответа. При этом следующий вопрос формулируется в зависимости от варианта ответа на предыдущий вопрос. Такая технология облегчает труд интервьюера, ускоряет проведение опросов и снижает число возможных ошибок. Компьютерная база ответов и их статистическая обработка осуществляются автоматически в реальном масштабе времени. В ряде случаев анализ только части ответов позволяет принять определенные решения и прекратить дальнейший опрос, экономя время и ресурсы.

7. Полностью компьютеризованное интервью. В данном случае в дополнение к ранее описанному методу респондент отвечает на вопросы путем нажатия на кнопки своего телефона или вопросы появляются на мониторе его компьютера, и респондент вводит ответы, используя обычную компьютерную клавиатуру.

8. Групповое самостоятельное заполнение анкет. Такой подход используется для удобства и удешевления интервьюирования.

Например, перед двадцатью-тридцатью членами группы демонстрируется рекламный ролик, после чего они индивидуально отвечают на вопросы анкеты, касающиеся оценки данного ролика. Участниками группы могут быть школьники одного класса, студенты одной учебной группы, отдыхающие какого-либо дома отдыха и т. д. Возможна обратная связь с интервьюером.

9. Самостоятельное заполнение оставленных анкет. Является вариантом обследования на основе самостоятельного заполнения анкет. После предварительного устного разъяснения целей и задач проводимого обследования анкета оставляется у респондента. Заполненную анкету, спустя определенное время, или забирают у респондента, или он отсылает ее по почте в конверте с оплаченным ответом. Данный метод применяется при проведении опросов на ограниченной территории, не требующей от интервьюера больших передвижений. Этот метод характеризуется высокой степенью возврата ответов, минимальным влиянием интервьюера на опрашиваемых, относительной дешевизной и хорошим контролем над выбором респондентов. В качестве респондентов могут выбираться сотрудники одной организации, жильцы отеля, посетители магазина и т.п.

10. Опрос по почте. Вопросы и ответы на них посылаются по почте.

Достоинства данного метода обусловлены тем, что не надо понимать интервьюеров, легкостью формирования групп целевых респондентов, его дешевизной. Этот метод обладает теми же недостатками, что и методы самостоятельного заполнения анкет без участия интервьюера. Они были рассмотрены выше. Кроме того, этот метод характеризуется низким процентом возвращенных ответов, он ориентирован в основном на достаточно грамотных людей, проживающих в странах с эффективной почтовой системой. Существует возможность искажения результатов за счет того, что ответившие респонденты по своему социальному положению, отношению к определенному товару, рекламе и т.п. отличаются от тех, кто не ответил на анкету (самовыборка респондентов).

В табл. 1.5 дается характеристика наиболее часто используемым методам.

Таблица 1.5 Характеристика методов опроса

Оценочный показатель

Метод опроса

телефонный опрос

личное интервьюирование

почтовый опрос

опрос по электронной почте

интернет-опрос

Гибкость процедуры опроса

Умеренная

Высокая

Низкая

Низкая

Умеренно-высокая

Разнообразие вопросов

Низкое

Высокое

Умеренное

Умеренное

Умеренно-высокое

Использование вспомогательных средств

Низкое

Высокое

Умеренное

Низкое

Умеренное

Обеспечение репрезентативности выборки

Умеренно-высокое

Умеренно-высокое

Низкое

Низкое

Низко-умеренное

Контроль работы интервьюеров

Умеренный

Низкий

Высокий

Высокий

Высокий

Объем получаемой информации

Низкий

Умеренно-высокий

Умеренный

Умеренный

Умеренный

Процент успешно завершенного опроса

Умеренный

Высокий

Низкий

Низкий

Очень низкий

Возможность искажения данных интервьюером

Умеренная

Высокая

Отсутствует

Отсутствует

Отсутствует

Затраты времени на проведение опроса

Низкие

Умерено-высокие

Высокие

Низкие

Очень низкие

Стоимость проведения опросов

Умеренная

Высокая

Низкая

Низкая

Низкая

2.7.7 Выбор конкретных методов опроса

Выбор конкретных методов опроса основан на учете следующих групп факторов: цели и ресурсы исследователя; характеристики респондентов; характеристики вопросов, задаваемых исследователем. Кратко охарактеризуем эти три группы факторов.

Цели сбора данных вытекают из целей проводимого маркетингового исследования. В основе их определения лежат требования получения информации желаемого качества. Последнее определяется отпущенным временем на принятие решения и имеющимися ресурсами.

К числу наиболее быстро реализуемых методов относятся телефонный опрос и интервьюирование посетителей крупных магазинов. Гораздо больше времени требует реализация персонального интервьюирования, опроса по почте.

Отсутствие достаточных денежных средств также оказывает влияние на выбор метода сбора данных. Например, если исследователь желает, чтобы выборка состояла из 1000 респондентов, а на эти исследования отпущено 5000 долларов, то кажется невозможным нанять интервьюеров при плате 20 долларов за одно интервью, поскольку в этом случае интервьюерам придется заплатить 20 000 долларов. В данном примере придется использовать более дешевые методы, например телефонное интервью.

Качество собранных данных оценивается многими параметрами, которые будут рассмотрены достаточно подробно в последующих разделах книги. Здесь же будут отмечены только два аспекта понятия "качество собранных данных": возможность распространять выводы, полученные от сбора информации для определенной выборки, на всю совокупность в целом и полнота информации, полученной от каждого опрошенного. Этим критериям, например, в гораздо большей степени удовлетворяет информация, полученная при личной встрече интервьюера с респондентом, чем при интервьировании по телефону.

Следует рассмотреть, по крайней мере, четыре характеристики целевой группы респондентов, влияющие на выбор метода сбора данных:

1. Степень охвата (incidence rate) характеризует процент респондентов, обладающих требуемыми характеристиками, в общей совокупности опрашиваемых. Например, если испытывается концепция низкокалорийных продуктов питания, приготавливаемых в микроволновой печи, то в качестве целевых респондентов следует рассматривать домохозяек, имеющих микроволновые печи и в течение последних шести месяцев покупающих низкокалорийные продукты питания. Только около 5% домохозяек, удовлетворяющих этим требованиям, соответствуют данному квалификационному признаку. Показатель степени охвата в данном случае означает, что только одна из двадцати домохозяек, опрошенных случайным образом, соответствует целям проводимого обследования.

Процесс сбора данных в этом примере, сопровождаемый высокими затратами денег и времени на поиск респондентов с требуемыми характеристиками, может потребовать больше времени и средств, чем само интервьюирование. Возможно, следует воспользоваться обследованием по почте, используя принцип самоотбора, согласно которому на вопросы отвечают только респонденты, удовлетворяющие приводимым в анкете квалификационным признакам.

2. Желание участвовать в опросе. Исследователя всегда беспокоит высокая степень отказа респондентов от участия в обследовании. Можно выделить два типа причин нежелания принять участие в любом обследовании. Первым обусловлен некими обобщенными чувствами подозрительности и стремлением никого не допускать в свою личную жизнь: определенная категория людей просто не хочет принимать участие в любом обследовании. Второй обусловлен специфическими обстоятельствами проведения конкретного обследования. Например, некоторые респонденты не желают обсуждать определенные темы. Выбранный метод опроса влияет на степень желания участвовать в обследовании. Так, люди находят более затруднительным отказаться от участия в личном интервью, чем в почтовом опросе. Обычно используются различные методы стимулирования желания принять участие в обследовании: денежная оплата, небольшие подарки (ручки, зажигалки и др.) и т.п.

3. Возможность принятия участия в опросе. Даже если потенциальный респондент удовлетворяет двум вышеизложенным требованиям, он в силу тех или иных причин может не принять участие в обследовании (командировка, болезнь, неожиданные семейные обстоятельства, забывчивость и т.п.). Обычно личные контакты с потенциальными респондентами увеличивают вероятность их участия в обследовании, в то время как опросы по почте не обладают подобным стимулирующим социальным воздействием.

4. Разнообразие респондентов характеризует степень, в которой перспективные респонденты обладают некоторыми ключевыми чертами. Например, если только малая часть целевой совокупности посещает крупные универсальные магазины, то опрос посетителей таких магазинов не даст репрезентативных результатов. Чем более разнообразной является целевая группа, тем более личностный подход для обеспечения участия в обследовании нужных респондентов должны использовать исследователи.

Выбор методов сбора данных во многом определяется характером вопросов. Здесь, прежде всего, следует выделить уровень сложности задач, которые ставятся перед респондентами. Например, тестирование вкусовых качеств какого-то продукта питания или испытание телевизионной рекламы требуют достаточно сложной подготовки, специального оборудования, отдельных помещений и четкого контроля над процедурами их реализации.

Далее следует отметить, что количество информации, запрашиваемой у респондентов, сильно меняется от одного исследования к другому. Например, одно исследование ставит своей целью получение разнообразной информации о продукте и его марке, о жизненном стиле покупателей и их демографических характеристиках. В то время как другое пытается только определить, что посетитель магазина запомнил из рекламы у входа в данный магазин.

Традиционно телефонные обследования являются самыми короткими, в то время как личное интервью - достаточно пространным.

Все другие методы сбора данных занимают промежуточное положение. Часто комбинированно применяют несколько методов сбора данных. Например, после короткого телефонного интервью проводится опрос по почте.

Существенное влияние на выбор метода сбора данных оказывает степень чувствительности изучаемой темы, т.е. степень затрагивания личных интересов, взглядов, морально - этических аспектов (сдача крови, расовые проблемы, личная гигиена, пожертвования в благотворительных целях и др.). Опыт изучения данных проблем говорит о том, что здесь менее всего подходит персональное интервью, а чаще всего используется телефонное интервью или интервью с помощью компьютера.

Выбор надлежащего метода следует основывать на одновременном учете всех указанных факторов, что чрезвычайно сложно и что порой дает противоречивые результаты. Окончательный выбор во многом зависит от квалификации и опыта работы исследователей, глубины владения ими отдельными методами сбора данных. В общем плане при выборе метода опроса надо руководствоваться ответами на следующий вопрос: "Какой метод сбора данных позволит получить наиболее полную репрезентативную информацию в пределах отпущенных времени и денежных средств?"

2.8 Разработка выборочного плана и определение объема выборки

2.8.1 Основные понятия

На данном этапе маркетинговых решений возникает необходимость получить информацию о параметрах "группы", среди членов которой будет проводиться маркетинговое исследование. Например, управляющий маркетингом желает иметь данные об объеме сбыта продуктов его компании через различные типы розничных магазинов ("группа"). Такая "группа" в статистике называется генеральной совокупностью или просто совокупностью.

Информацию о параметрах генеральной совокупности можно получить после проведения сплошного наблюдения (переписки) или выборочного исследования. Перепись (census) подразумевает сбор сведений обо всех элементах генеральной совокупности.

Иногда совокупность является достаточно малой по своей численности, и менеджер может изучить всех ее членов. Обычно же это сделать невозможно: изучить, например, мнение всех детей возраста от 3 до 5 лет относительно игрушек определенного типа. Следовательно, проводится изучение только части совокупности, называемой выборкой.

Выборка является базовым уровнем проводимых исследований. Необходимо отметить, что, поскольку выборка является частью изучаемой совокупности, полученные от выборки данные, скорее всего не будут в точности соответствовать данным, которые можно было бы получить от всех единиц совокупности. Различие между данными, полученными от выборки, и истинными данными называется ошибкой выборки. Ошибки выборки обусловливается двумя факторами: методом формирования выборки и размером выборки. Эти вопросы будут рассмотрены ниже.

Формирование выборки, прежде всего, основывается на знании контура выборки (sampling frame), под которым понимается список всех единиц совокупности, из которого выбираются единицы выборки. Например, если в качестве совокупности рассматривать все автосервисные мастерские города Москвы, то надо иметь список таких мастерских, рассматриваемый как контур, в пределах которого формируется выборка.

Контур выборки неизбежно содержит ошибку, называемую ошибкой контура выборки и характеризующую степень отклонения от истинных размеров совокупности. Очевидно, что не существует полного официального списка всех автосервисных мастерских города Москвы, включая полулегальный и нелегальный бизнес в данной области. Исследователь должен информировать заказчика работы о размерах ошибки контура выборки.

Существуют три главные проблемы формирования выборки. Прежде всего, исходя из сути рассматриваемой задачи, необходимо определить, кто является единицей выборки. Например, фирма - производитель сотовых телефонов решила изучить потенциальный рынок на свою продукцию. Было принято решение изучить мнение по данному вопросу как лиц, принимающих решения по выбору коммуникационного оборудования в различных организациях, так и глав семейств, определяющих данную политику в семье.

Далее необходимо четко определить, кто рассматривается в качестве единицы выборки. В нашем примере единицами выборки являются начальники коммуникационных отделов и главы семейств.

Очень важным является также определение контура выборки. Например, список всех домовладельцев определенного региона. В целях выполнения правила репрезентативности проводимого исследования необходимо обратить внимание на метод, с помощью которого выбираются единицы выборки из контура выборки. Здесь разговор идет о планировании выборки.

И, наконец, необходимо решить вопрос об объеме выборки, который определяет число изучаемых единиц выборки. Объем выборки очень редко зависит от размера совокупности. Поэтому объем выборки для одного региона необязательно существенно меньше объема выборки для государства в целом.

При формировании выборки используются вероятностные (случайные) и невероятностные (неслучайные) методы.

Если все единицы выборки имеют известный шанс (вероятность) быть включенными в выборку, то выборка называется вероятностной (случайной). Если этот шанс (вероятность) неизвестен, то выборка называется невероятностной (неслучайной). К сожалению, в большинстве маркетинговых исследований из-за невозможности точного определения размера совокупности не представляется возможным точно рассчитать вероятности. Поэтому термин "известная вероятность" скорее основан на использовании определенных методов формирования выборки, чем на знании точных размеров совокупности.

Вероятностные методы включают в свой состав: простой случайный отбор, систематический отбор, кластерный отбор и стратифицированный отбор.

Простой случайный отбор предполагает, что вероятность быть избранным в выборку известна и является одинаковой для всех единиц совокупности. Вероятность быть включенным в выборку определяется отношением объема выборки к размеру совокупности.

Простой случайный отбор может осуществляться с помощью следующих методов: формирование выборки вслепую и с помощью таблицы случайных чисел.

При использовании метода формирования выборки вслепую единицы совокупности в соответствии с их фамилиями, названиями или другими признаками вносятся в карточки, которые в перемешанном виде помещаются в какую-то непрозрачную емкость (ящик, коробку и т.п.). Из данной емкости кто-то случайным образом вытягивает число карточек, определяемое объемом выборки.

В таблицах случайных чисел содержатся числа, порядок включения которых в таблицу осуществлен случайным образом. Единицам совокупности присваивают порядковые номера. В таблице случайных чисел выбирают любую начальную точку и, двигаясь в произвольном направлении и произвольно меняя направление движения, выбирают необходимое количество номеров из числа присвоенных, равное заранее установленному объему выборки.

Использование простого случайного отбора гарантирует, что каждая единица совокупности известна и имеет равные шансы быть включенной в выборку.

Однако, чтобы можно было эти методы использовать, необходимо предварительно определить каждую единицу совокупности, что при больших размерах совокупности сделать достаточно сложно, а порой и невозможно.

Данный недостаток существенно снижается при использовании компьютера для присвоения единицам совокупности номеров и формирования выборки. При телефонном интервью компьютер может генерировать случайным образом телефонные номера: он имеет генератор случайных чисел.

Начальная часть метода систематического отбора соответствует начальной части метода простого случайного отбора: необходимо получить полный список единиц генеральной совокупности.

Однако далее вместо присвоения порядковых номеров используется показатель "интервал скачка", рассчитанный как отношение размера совокупности к объему выборки. Например, если используется телефонный справочник и интервал скачка был определен равным 250, то это означает, что каждый 250-й телефонный номер включается в выборку. Для определения же начальных страницы и колонки справочника используются случайные числа.

Очевидно, что данный метод является более экономичным и быстрым по сравнению с методом простого случайного отбора. Случайные числа используются только на начальной стадии его реализации. Вместе с тем такой метод дает менее репрезентативные результаты по сравнению с методом простого случайного отбора.

Особенно широко метод систематического отбора используется, когда для различных видов совокупностей имеются различные справочники, списки, спецификации и т.п. материалы.

Другим методом вероятностного отбора является кластерный отбор, основанный на делении совокупности на подгруппы, каждая из которых представляет совокупность в целом. Базовая концепция данного метода очень похожа на базовую концепцию метода систематического отбора, однако реализация этой концепции осуществляется по-другому. Предположим, что исследуется мнение населения какого-то региона относительно марки какого-то товара.

Регион разбивается на четко определяемые части (кластеры), например области. Исследователь может считать, что выделенные кластеры являются идентичными и мнение населения этих областей характерно для региона в целом. Далее одна из областей (один кластер) выбирается случайным образом, определяется совокупность для этой области, в ней приводится соответствующее исследование, а выводы обобщаются на совокупность всего региона (одноступенчатый подход).

Формирование выборки можно осуществить и на основе двухступенчатого подхода. В этом случае после первоначального случайного формирования выборки кластеров используется один из вероятностных методов для проведения исследований среди единиц выборки. Очевидно, что репрезентативность результатов, полученных на основе исследований для группы кластеров, является более высокой, чем для одного кластера.

Однако этот подход является более дорогим по сравнению с одноступенчатым подходом.

Иногда при проведении исследований, когда общую исследуемую территорию можно разбить на отдельные зоны, при формировании выборки используется выборочная решетка, накладываемая на карту обследуемой территории. Каждая ячейка решетки определяет конкретный кластер. Далее используется один из описанных методов формирования выборки. К сожалению, метод выборочной решетки не учитывает административные, естественные (реки, улицы и т.п.) и другие границы.

В основе всех описанных методов лежит предположение, что любая совокупность характеризуется симметричным распределением ее ключевых характеристик. Другими словами, каждая выборка достаточно полно характеризует всю совокупность, различные крайности в выборке уравновешивают друг друга. Но такая ситуация на практике встречается крайне редко. Скажем, исследуется рыночный потенциал определенного региона для какого-то товара. Население больших, средних и малых городов, сельской местности данного региона отличается по уровню образования, дохода, образу жизни.

В случае несимметричного распределения совокупности последняя разделяется на различные подгруппы (страты), например по уровню доходов, и выборки формируются из этих подгрупп, по сути дела являющихся сегментами рынка. Такой метод носит название стратифицированного отбора.

При использовании данного метода, прежде всего, следует выбрать некоторую наблюдаемую характеристику (признак), определяющую каждую единицу совокупности, например уровень дохода.

Далее для каждой страты с помощью случайного отбора формируется выборка.

Если размер выборки для определенной страты пропорционален размеру страты по отношению ко всей совокупности, то выборка называется пропорционально стратифицированной. В случае непропорционально стратифицированной выборки необходимо использовать весовые коэффициенты, уравновешивающие размеры страт.

При применении невероятностных методов отбора формирование выборки осуществляется без использования понятий теории вероятностей, вследствие чего невозможно рассчитать вероятность включения в выборку единицы совокупности.

Кратко охарактеризую следующие невероятностные методы отбора: отбор на основе принципа удобства, отбор на основе суждений, формирование выборки в процессе опроса и формирование выборки на основе квот.

Смысл метода отбора на основе принципа удобства заключается в том, что формирование выборки осуществляется самым удобным с позиции исследователя образом, например с позиций минимальных затрат времени и усилий, с позиции доступности респондентов. Выбор места исследования и состава выборки производится субъективным образом, например, опрос покупателей осуществляется в магазине, ближайшем к месту жительства исследователя. Очевидно, что многие представители совокупности не принимают участия в опросе.

Данный метод скорее применяется для поиска респондентов с заданными характеристиками. Например, в универсаме путем первоначального задания вопросов выявляется, что из себя представляют опрашиваемые и только некоторые из их числа подвергаются дальнейшему обследованию. Данный метод является дешевым и простым, и существуют методы оценки ошибки формирования выборки при его использовании, которые будут рассмотрены ниже.

Формирование выборки на основе суждения основано на использовании мнения квалифицированных специалистов, экспертов относительно состава выборки. На основе такого подхода часто формируется состав фокус-группы. Например, изучается потребность в издании кулинарной книги для приготовления в микроволновой печи низкокалорийной пищи. На основе мнения исследователей в состав фокус-группы было включено 12 домохозяек; шестеро из них владело микроволновыми печами более трех лет, трое - менее трех лет и трое только собирались их купить. По мнению исследователей, такой состав группы достаточно полно соответствует целям проводимого исследования. Результаты работы фокус-группы были признаны удовлетворительными; они послужили основой для крупномасштабных региональных опросов, проведенных на основе вероятностных методов.

Формирование выборки в процессе опроса основано на расширении числа опрашиваемых, исходя из предложений респондентов, которые уже приняли участие в обследовании. Первоначально исследователь формирует выборку намного меньшую, чем требуется в проводимом исследовании, затем она по мере проведения обследования расширяется. Данный метод применяется там, где контуры выборки являются очень ограниченными, например, при проведении маркетинговых исследований продукции производственно-технического назначения.

Формирование выборки на основе квот (квотный отбор) предполагает предварительное, исходя из целей исследования, определение численности групп респондентов, отвечающих определенным требованиям (признакам). Например, в целях исследования было принято решение, что в универсаме должно быть опрошено пятьдесят мужчин и пятьдесят женщин. Интервьюер проводит опрос, пока не выберет установленную квоту. Такой метод обычно применяется в случае, когда имеется четкое суждение о характеристиках респондентов, мнение которых целесообразно изучить в проводимом исследовании. Он дает возможность контролировать деятельность интервьюеров, ограничивая выбор респондентов определенными требованиями.

На практике имеет место параллельное использование нескольких методов формирования выборки. Так, формирование выборки для оценки мнения населения России относительно различных марок какого-либо товара, например холодильника, может осуществляться по следующей схеме:

1. Россия согласно ее административно-территориальному делению делится на 89 субъектов Федерации.

2. Осуществляется случайным образом выбор девяти субъектов (исключая Москву и С.-Петербург).

3. Все населенные пункты (исключая Москву и С.-Петербург) в зависимости от численности населения делятся на пять групп: до 1000 жителей, от 1000 до 10 000 (поселки), от 10 000 до 100 000, от 100 000 до 500 000, свыше 500 000 (города). Москва и С.-Петербург исследуются отдельно.

4. На основе квотного метода устанавливается, что для каждого из девяти выбранных субъектов Федерации исследуются три города и два поселка (по крайней мере, по одному населенному пункту из этих двух типов поселков и трех типов городов должно принадлежать каждой категории). Для этого берется каждый пятый населенный пункт из справочника Госкомстата "Численность населения Российской Федерации по городам, рабочим поселкам и районам на 1 января 1993г." и определяется, в какую из категорий он попадет (систематический отбор). Так поступают до тех пор, пока не наберется нужное количество населенных пунктов.

Если, дойдя до конца списка, не будет найдено квотное число населенных пунктов, процесс выбора населенных пунктов начинается сначала, но берется каждый четвертый населенный пункт, и т.д.

5. Выбирается случайным образом в каждом выбранном городе и поселке, по меньшей мере, 20 респондентов.

Таким образом, кроме Москвы и С.-Петербурга должна быть проинтервьюировано 900 респондентов. В Москве и С.-Петербурге опрашивается по 50 респондентов. В итоге должно быть проинтервьюировано 1000 респондентов.

В качестве примера рассмотрим формирование выборки для исследования рынка товаров широкого применения для индивидуальных потребителей в каком-то городе (на примере города Москвы).

В качестве главных показателей, определяющих выборочные квоты, могут использоваться показатели возраста и пола. В последнем случае привлекается пропорциональное количество мужчин и женщин для каждой возрастной группы.

Предположим, предварительно было установлено, что, как правило, данный товар потребляется в возрасте от 10 до 65 лет. В случае, когда товар используют потребители другого возраста, выбираются иные возрастные группы. Генеральную совокупность составляют все жители Москвы от 10 до 65 лет.

Распределение количества респондентов по группам производится пропорционально распределению по тем же группам генеральной совокупности. В табл. 1.6 приводятся результаты квотирования респондентов для размера выборки в 1000 человек.

Таблица 1.6 Структура выборки

Возрастная группа, лет

Процентное значение в генеральной совокупности

Процент мужчин в генеральной совокупности

Количество респондентов мужчин в выборке

Количество респондентов женщин в выборке

Количество респондентов в выборке

10-19

16,77

50,50

80

80

160

20-29

14,86

49,75

72

76

158

30-39

18,42

47,06

88

100

188

40-49

17,35

45,30

80

96

176

50-65

32,60

43,52

144

184

328

ИТОГО:

464

536

1000

2.8.2 Этапы разработки выборочного плана

Рассмотренные выше понятия выстраиваются в определенную логическую последовательность отдельных шагов (этапов) по разработке выборочного плана, целью которого является получение конечного варианта выборки. Можно выделить следующие этапы разработки выборочного плана:

1. Определение соответствующей совокупности.

2. Получение "списка" совокупности.

3. Проектирование выборки.

4. Определение методов доступа к совокупности.

5. Достижение нужной численности выборки.

6. Проверка выборки на соответствие требованиям.

7. В случае необходимости формирование новой выборки.

На первом этапе определяется целевая совокупность, определяемая целями исследования. Четко устанавливаются характеристики, которым должны удовлетворять единицы совокупности и которые дают возможность отличить целевую совокупность от других возможных совокупностей.

На втором этапе устанавливается, откуда может быть получен перечень единиц совокупности. Это нужно для установления контура выборки. Здесь используются соответствующие справочники, данные переписи населения и местных органов власти, материалы различных консультационных организаций.

На данном этапе также необходимо оценить ошибку контура выборки. Для этого необходимо:

1. Определить, насколько список людей (юридических лиц), включенных в контур выборки, отличается от совокупности в целом.

2. Установить, какой контингент людей не вошел в состав контура выборки.

Обычно ответы на начальные вопросы вопросника дают возможность идентифицировать опрашиваемых и установить, входят ли они в состав изучаемой совокупности. Далее, если исследователь не может установить причины, по которым не включение в контур выборки определенных единиц совокупности негативно влияет на состав окончательной выборки, то ошибка контура выборки считается допустимой.

Например, в городе автосервисная компания изучает мнение водителей относительно содержания определенного ремонтного набора для автомобиля. Было принято, что наиболее полным списком совокупности является список автовладельцев, имеющийся в городской ГИБДД. Однако не все новые жильцы-автовладельцы зарегистрировали автомобили в положенные сроки. Кроме того, услугами автосервисной компании могут пользоваться проезжие автовладельцы. Но число незарегистрированных автовладельцев, скорее всего, будет незначительным на фоне общего числа автовладельцев города, а вкусы и потребности проезжих автовладельцев вряд ли кардинальным образом отличаются от потребностей автовладельцев-резидентов. Поэтому в данном случае ошибку контура выборки можно считать допустимой.

На третьем этапе с учетом ранее выполненных работ осуществляется проектирование самой выборки. Здесь необходимо найти баланс между структурой выборки, затратами на сбор данных и объемом выборки; в деталях обсудить выборочные методы. Выборочный план должен соответствовать целям проводимого обследования и существующим ограничениям.

Определение методов доступа к совокупности обусловливается тем, кто осуществляет сбор данных. Многие маркетинговые исследования основаны на привлечении фирм, специализирующихся на сборе информации. Такие фирмы обычно имеют свои отработанные методы выхода на изучаемую совокупность. Например, фирмы, проводящие телефонное интервьюирование, имеют свои подходы к осуществлению повторных звонков в случае, если телефон был занят или на звонок никто не ответил. Это касается также числа повторных звонков по занятому номеру.

Достижение нужной численности выборки осуществляется в два этапа. Прежде всего, устанавливается единица выборки, затем от этой единицы должна быть получена требуемая информация. Однако очевидно, что на ряд выбранных респондентов в силу тех или иных причин невозможно выйти и что не каждый выбранный респондент выразит желание отвечать на вопросы. Возникает проблема замены респондентов, которая может быть решена с помощью трех методов: выбор следующего по списку респондента, использование выборки больших размеров и формирование повторной выборки.

Первый метод чаще всего применяется в случае систематической выборки. Скажем, в качестве контура выборки используется телефонный справочник и необходимо опросить каждого сотого абонента. Если не удается получить ответ от первого респондента, то звонят абоненту, следующему по справочнику, и так поступают, пока не удастся получить ответы на задаваемые вопросы; только после этого осуществляется "скачок" в сто номеров.

Использование выборки больших размеров осуществляется в случае, когда заранее известен процент респондентов, не принимающих участие в опросе. Например, известно, что на письма при почтовом опросе отвечает только 20% респондентов (в ряде случаев этот процент бывает существенно меньше). Поэтому, чтобы получить окончательную выборку численностью в 200 человек, письма следует направить тысячу потенциальных респондентов.

Если процент ответов намного ниже, чем ожидалось, то контуры исходной выборки расширяются за счет дополнительных имен, найденных, скажем, случайным образом. В этом заключается смысл метода формирования повторной выборки.

Проверка выборки на соответствие требованиям может осуществляться по-разному, например, путем сравнения профиля данной выборки с профилем выборки, использованной ранее при проведении аналогичных исследований. Цель данной проверки заключается в том, чтобы убедить клиента в репрезентативности выборки.

Такая проверка может быть осуществлена только в случае, когда возможно провести сравнение данной выборки с аналогичными выборками, использованными ранее.

Формирование новой выборки осуществляется тогда, когда проверка показала, что выборка не представляет совокупность в целом. В этом случае выбираются новые респонденты, и они добавляются к ранее использованной выборке, пока не достигается удовлетворительный уровень репрезентативности.

2.8.3 Определение объема выборки

В реальности решение об объеме выборки является компромиссом между теоретическими предположениями о точности результатов обследования и возможностями их практической реализации, прежде всего имеются в виду затраты на проведение опроса.

Следует отметить, что объем выборки никак не влияет на репрезентативность полученных результатов. Предположим, например, что в целях изучения степени использования в России персональных компьютеров в научной работе проводился опрос на основе принципа удобства на одном из московских перекрестков. И хотя было опрошено 5000 респондентов, полученные результаты не являются репрезентативными даже для Москвы. Это обусловлено тем, что был использован невероятностный метод формирования выборки, который в данном случае применять было нельзя.

Однако размер выборки влияет на точность результатов. Точность выборки характеризует близость профиля выборки (например, итогового ответа на какой-то вопрос) к истинному профилю совокупности. Случайная выборка большего размера обеспечивает получение более точных результатов.

На практике используется несколько подходов к определению объема выборки. Прежде всего, опишем наиболее простые.

Произвольный подход основан на применении "правила большого пальца". Например, бездоказательно принимается, что для получения точных результатов выборка должна составлять 5% от совокупности. Данный подход является простым и легким в исполнении, однако не представляется возможным установить точность полученных результатов. При достаточно большой совокупности он к тому же может быть и весьма дорогим.

...

Подобные документы

  • Цели, задачи и основные понятия маркетинговых исследований. Формулирование целей и выбор методов проведения маркетинговых исследований. Определение типа требуемой информации, особенности источников ее получения. Общая характеристика методов сбора данных.

    курсовая работа [30,3 K], добавлен 01.10.2010

  • Цели, задачи, основные понятия маркетингового исследования. Формулирование целей маркетингового исследования. Выбор методов проведения, определение типа требуемой информации, источников ее получения, специфика методов сбора данных. Примеры решения задач.

    контрольная работа [147,4 K], добавлен 21.02.2010

  • Характеристика процесса маркетингового исследования. Определение потребности в проведении маркетинговых исследований. Формулирование целей, разработка плана и выбор методов. Тип требуемой информации и источники ее получения. Формы для сбора данных.

    реферат [33,2 K], добавлен 12.12.2009

  • Общая характеристика последовательности этапов проведения маркетинговых исследований. Определение потребности в проведении маркетингового исследования и его целей. Направления выявления проблем-причин. Выбор методов проведения маркетинговых исследований.

    курсовая работа [1,8 M], добавлен 15.11.2010

  • Цели, задачи и этапы проведения маркетинговых исследований. Определение типа требуемой информации и источников ее получения. Определение методов сбора данных. Общая характеристика магазина. Анализ проведения маркетинговых исследований на предприятии.

    курсовая работа [310,8 K], добавлен 27.10.2012

  • Сущность, типы и основные цели маркетинговых исследований. Характеристика наблюдения, эксперимента и опроса как методов получения первичной информации. План выборочного исследования. Сегментирование рынка и разработка конкурентоспособной продукции.

    реферат [68,7 K], добавлен 03.04.2018

  • Цели маркетинговых исследований. Определение потребности в проведении исследований. Определение типа требуемой информации и источников ее получения. Определение методов и разработка форм для сбора данных. Разработка выборочного плана и объема выборки.

    курсовая работа [34,5 K], добавлен 23.05.2014

  • Определение потребности в проведении маркетингового исследования, формулирование его целей, определение предмета. Выбор метода проведения маркетинговых исследований, разработка форм для сбора данных, выборочного плана и определение объема выборки.

    курсовая работа [81,0 K], добавлен 12.12.2011

  • Выбор цели, направления, методы проведения маркетинговых исследований и роль маркетинговой информации на предприятии. Характеристика методов сбора данных. Краткая характеристика швейного предприятия "Марго". Маркетинговые исследования рынка спецодежды.

    курсовая работа [33,2 K], добавлен 17.04.2014

  • Общее понятие, цели и задачи маркетинговых исследований, их виды и этапы проведения. Производственно-экономическая характеристика магазина "Подарки". Анализ организации маркетинговых исследований в магазине, разработка методов их совершенствования.

    курсовая работа [203,4 K], добавлен 14.06.2014

  • Маркетинговые исследования их необходимость, характеристика, цели, задачи и основные понятия и планирование. Методология планирования маркетинговых исследований. Совершенствование планирования маркетинговых исследований в организациях социальной сферы.

    дипломная работа [104,0 K], добавлен 18.12.2008

  • Сущность казуальных исследований в маркетинге. Формулирование целей и выбор методов проведения. Концепция причинности в маркетинге и ее условия. Внутренняя и внешняя валидность (достоверность) экспериментов. Преимущества и недостатки причинных методов.

    курсовая работа [225,6 K], добавлен 03.03.2009

  • Цели, задачи и направления рыночных исследований. Методы проведения маркетинговых исследований: сбор первичных и вторичных маркетинговых данных, определение объема выборки. Исследование конъюнктуры товарного рынка обуви и потребительских предпочтений.

    курсовая работа [90,3 K], добавлен 02.07.2013

  • Характеристика маркетинговых исследований. Роль этапов исследований: формулирования целей, сбора информации, планирования и анализа результатов. Характеристика источников данных и методов сбора информации. Особенности проведения интернет-опросов.

    курсовая работа [285,3 K], добавлен 18.01.2014

  • Цели и задачи маркетинговых исследований. Система маркетинговой информации, ее суть. Виды маркетинговой информации и источники ее получения. Общая характеристика методов сбора данных. Наблюдение и его роль при проведении маркетинговых исследований.

    контрольная работа [125,4 K], добавлен 19.01.2012

  • Теоретические аспекты маркетинговых исследований. Характеристика основных методов проведения исследований и сбора первичной информации: анкетирование, фокус-группа. Определение природы потребности, выявление предпочтений потребителей по торговым маркам.

    курсовая работа [156,8 K], добавлен 02.06.2011

  • Основные этапы маркетинговых исследований в гостиничном хозяйстве. Маркетинговые исследования гостиниц г. Екатеринбурга. Использование вторичной информации как удобный способ маркетинговых исследований. Фирмы, осуществляющие маркетинговые исследования.

    курсовая работа [1,1 M], добавлен 10.06.2014

  • Сущность маркетинговых исследований и их основные категории и алгоритмы. Организация маркетинговых исследований, преимущества и недостатки контактных методов, типичные примеры закрытых и открытых вопросов. Показатели, характеризующие товарные рынки.

    реферат [52,3 K], добавлен 24.07.2010

  • Методы сбора данных при проведении маркетинговых исследований, их классификация. Проблемы и способы реализации маркетинговых исследований фирмы "Джонсон вакс". Количественный метод сбора данных – работа фокус-группы. Цели маркетинговых исследований.

    контрольная работа [23,9 K], добавлен 12.11.2010

  • Формулирование целей маркетинговых исследований. Отбор источников информации. Определение методов сбора информации. Составление плана выборки. Анализ собранной информации. Предоставление полученных результатов. Характеристика рынка мороженного.

    курсовая работа [131,1 K], добавлен 08.01.2016

Работы в архивах красиво оформлены согласно требованиям ВУЗов и содержат рисунки, диаграммы, формулы и т.д.
PPT, PPTX и PDF-файлы представлены только в архивах.
Рекомендуем скачать работу.