Качественный анализ для социологов

Рассмотрение проблемы обучения качественному анализу в социальных науках. Разработка теории проведения анализа с помощью кодов, заметок (памяток), диаграмм. Описание правила большого пальца. Представление материалов по случаям: данные и интерпретации.

Рубрика Социология и обществознание
Вид методичка
Язык русский
Дата добавления 29.10.2013
Размер файла 489,4 K

Отправить свою хорошую работу в базу знаний просто. Используйте форму, расположенную ниже

Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.

Целенаправленные (генерирующие) вопросы в свою очередь естественно и просто приводить исследователя к вопросу: "Как я могу найти пример x или y?". Технический термин для этого - теоретическое применение (theoretical sampling) - для исследователя, после теоретического анализа, необходимо найти примеры популяций, событий, моделей активности, которые подчиняются его или ее примитивной теории. Это примеривание используется неявным образом (а в прикладных исследованиях - явным образом) для проведения сравнения между различными субопределениями. Таким образом, исследователи могут сравнить (хотя бы на уровне представлений) те существующие модели соединения тело - машина, которые являются комфортными с теми, которые таковыми не являются. Исследователь также может думать о дискомфорте или беспокойстве, вызываемом разными соединениями. Но он может двигаться дальше в процессе сбора полевых данных и сделать (или сконструировать) сравнение между ними. Например, когда случается отключение энергии в госпитале, исследователь делает обследование возможных последствий, т. к. некоторые виды оборудования не связаны с электричеством. Можно найти много вариантов решения, один из наиболее интересных - это аварийное электропитание, работающее около 2-х часов, которое делает клинику не зависящей от общей электросети.

Руководствуясь своими теориями, исследователь может направлять опримеривание даже более широко, думая о безопасности или дискомфорте разных других машин - связанных с телом или нет - как, например, аэропланы, тостеры, или больничные вибромассажеры тела. Целью создания представления об этом является не большое количество похожих теорий о машинах вообще или представлений о безопасности или опасности, а стимуляция теоретического мышления для создания общей теории медицинской механизации в госпитальной работе. Одни виды полевых исследований вплотную связаны с другими видами.

Понятно также, что некоторые идеи об этом сравнении могут прийти из личного опыта, из общения с кем - то, кто работает с машинами, из чтения новелл или автобиографий, нехудожественной литературы по этому предмету.

1.2.5 Несколько замечаний по процессу работы

Далее, нужно отметить кое-что об основных процессах исследования - думании, полевом наблюдении, обследовании, интервью, делании записок, анализе.

Первое, для того, чтобы проводить различия и делать сравнения, существенна постановка генерирующих вопросов. Они возникают при рассмотрении данных, особенно экспериментальных. Самые удачные вопросы могут быть следствием инсайта, побудившего исследователя изучить именно этот феномен. Но обычно подобные озарения являются следствием уже существующих интересов в этой или смежных областях.

Второе, исследователь делает некоторое количество интересных, но на первых этапах предварительных, предположений о характере имеющихся связей между обнаруженными событиями. Кодирование начинает и начало создания концептуально плотной теории, которая по мере прибавления взаимосвязей становится все более и более плотной.

Третье, теория не просто открывается, но и проверяется (верифицируется), поскольку предварительный характер этих связей (возможных ответов и гипотез, их содержащих) требует проверки на следующих стадиях исследования с новыми данными и новым кодированием.

Четвертое, отношение кодирования к реальному миру данных является центральным процедурой исследования. Этот процесс должен быть связан со сбором новых данных, чтобы исследование поддерживало само себя.

Пятое, вопрос интеграции - какие взаимосвязи и данные являются наиболее ключевыми, т. е. короче, являются "ядром" нарождающейся теории. Этот вопрос будет обсуждаться позже, а пока достаточно сказать, что начинать надо с примитивной и простой увязки категорий, которая со временем становится все более жесткой. Центральной является категория, наилучшим образом увязывающаяся с остальными категориями. Чтобы ее создать, нужна специальная техника: ведь эта категория должна удовлетворять как целям исследователя, так и целям заказчика.

Шестое, отслеженные теоретические идеи надстраиваются и связываются путем писания теоретических записей. Время от времени новые идеи берутся из самой теории, сортируются, после чего для каждой новой идеи создается новая записка. По ходу исследования записки объединяются и упорядочиваются, создаются новые, имеющие более концептуальное содержание. Сортировка этих записок и кодов может происходить на любой стадии исследования. Систематическая сортировка особенно важна на последующих стадиях, когда аналитик переходит к публикациям материалов.

Седьмое, жизненно необходимо признать временность и относительность трех аспектов - "сбор данных; кодирование; описание". Практики GT должны понимать, насколько их взгляд на эту теорию отличается от всех остальных. Сбор данных быстро приводит к кодированию, оно к записям, но может приводить к дополнительному кодированию или дополнительному сбору данных. Возврат к старым данным может происходить на любой стадии. Большинство качественных исследователей занимается повторным рассмотрением данных. Но не то, чтобы качественные исследователи все время находятся между кодированием, сбором данных и записями. Более позитивистский подход запрещает использование старых данных для проверки гипотез.

Восьмое, во время окончательного этапа написания исследователю понадобится дополнительная интеграция - исследование возвращается к данным, к кодированию,к запискам и т.д. И тут существует большой разброс - насколько исследователь будет опираться на это во время писания. Фактически, это необходимый процесс восполнения пробелов в данных: все стадии исследования проигрываются здесь вновь.

1.2.6 Словарь основных терминов

Сбор данных - нахождение, порождение материала, который исследователь потом анализирует.

Опытные данные исследователя - то, что уже есть в голове исследователя, взято ли это из личного опыта, или прочитано в книгах.

Кодирование - общий термин для концептуализации данных, т. е. кодирование включает постановку вопросов и дачу на них ответов в форме гипотез.

Код - просто термин для любого результата такого анализа.

Построение определений - базовая операция в делании различий. Ее результатами является определения и субопределения.

Свойства (property) - наиболее конкретная черта чего-то (идеи, вещи, отношения), которая может быть концептуализирована и которая достигает уровня специфичности, который аналитик требует для своего исследования.

Гипотеза - то же, что и в любом научном словаре.

Центральная категория - категория, которая центральна для интеграции в теорию.

Теоретическое примеривание - примеривание, подсказанное нарождающейся теорией - это есть примеры происшествий, событий и т. д. Она используется для того, чтобы делать различия между и среди подобных происшествий, событий и т.д.

Теоретическое насыщение - когда дополнительный анализ не дает ничего нового о данной категории.

Концептуальная плотность - многообразие категорий, свойств и их отношений.

Интеграция - все возрастающая организация (или артикуляция), компонент теории.

Вариация - результат сравнений, GT анализ,основанный на большом количестве сравнений, он может быть многовариантен. Сравнение категорий и свойств включает их стыковку, например, теоретическую чувствительность.

Теоретические записки - это записи исследователем теоретических вопросов, гипотез о сводке кодов и т. д., метод "отслеживания" кодирования результатов и стимуляции последующего кодирования, а также основное средство для интеграции теории.

Теоретическая сортировка - сортировка теоретических заметок для нужд интеграции, коды тоже сортируются для той же цели.

Интегративная диаграмма - визуальное средство, которое также способствует кумулятивной интеграции в течение всего хода исследования.

Целенаправленные (генеральные) вопросы - вопросы, которые стимулируют развитие исследования в потенциально выгодных направлениях. они ведут к гипотезам, полезным сравнениям, сбору определенных классов данных и даже к общим стратегиям подхода к потенциально важным проблемам.

2. Часть 2

2.1 Анализ с помощью основной теории: его основные элементы

В этой части вводной главы представлено некоторое число основных исследовательских операций. Некоторые из их описаний не возможно полностью понять, по крайней мере все тонкости, без просмотра иллюстрационных материалов, представленных в следующих главах, обеспечивающих визуализацию представленных здесь замечаний. По этой причине возможно вам стоило бы быстро просмотреть эту главу и вернуться к ее более тщательному прочтению и изучению позднее.

Наш подход к качественному анализу данных называется термином -основная теория - "так как в нем акцент сделан на разработку теории и данных, на которых эта теория основана."

Основная теория "это детальный поиск основ с помощью систематического" и интенсивного "анализа данных проводимого часто в последовательности - предложение за предложением, фраза за фразой полевой записи, интервью или другого документа; при помощи <постоянных сравнений> данных, которые затем сводятся вместе и кодируются" посредством операций, которых мы коснулись в предыдущей главе, и таким образом разрабатывая хорошо сконструированную теорию. Основная задача анализа состоит не только в том, чтобы собрать и привести в порядок "массу данных, но в том, чтобы организовать множество идей, которые возникли при анализе данных".

Ранее уже были указаны основные составляющие разработки комплекса переплетенных между собой концепций в интегрированную теорию; теория, которая проявляется и формулируется по мере ее разработки в точном соответствии с интенсивным анализом данных. Эти процедуры в течение исследовательского проекта могут быть различными. Таким образом, сначала предлагается рассмотреть эту тему, а затем обратимся к более подробному обсуждению деталей основных процедур, которые были затронуты до этого:

1) модель концепции индикатора, направляющая кодирование;

2) сбор данных;

3) кодирование;

4) основные категории;

5) теоретические выработки;

6) сравнение;

7) теоретическое заполнение;

8) интеграция теории;

9) теоретические заметки;

10) теоретическая сортировка.

2.2 Этапы исследования и операции

Теперь перейдем к обсуждению наиболее существенных, основных процедур обнаружения, верификации, формулировки основной теории. Они задействованы в течение всего исследовательского проекта, что будет видно из приведенных здесь ниже иллюстрационных примерах, весьма тесно связаны друг с другом последовательно и даже часто одновременно. Но какова их связь с другими этапами исследовательскими всего исследовательского проекта? Об этом подробнее будет сказано позднее, но некоторые замечания необходимы сейчас для того, чтобы вы могли прочитать конкретные материалы, которые будут представлены в этой книге.

Как будет видно, ранние этапы исследования более "открыты" , чем поздние этапы. На ранних этапах нет необходимости концентрироваться на каких-либо категориях. Сначала пройдет не один месяц исследования прежде, чем исследователь будет более или менее уверен в выборе основных категорий, и еще пройдут многие месяцы прежде, чем эти основные категории будут дополняться и связываться множеством путей с другими категориями. На ранних этапах исследовательского проекта будет возникать множество категорий, которые позднее будут отброшены за ненадобностью или из-за отсутствия связи с основными категориями. Точно также многие из возникающих гипотез придется оставить, не смотря на то, что они первоначально были сформулированы энтузиазмом исследователя. И все же на самых ранних этапах исследования теоретические выработки управляют сбором данных, а сравнительный анализ делается с самого начала. Первые заметки бывают намного менее интегрированы, чем последующие заметки, но они тем не менее могут открыть новые неизвестные пути исследования, или могут концентрироваться на раннем микроскопическом анализе данных.

Когда исследователь уже решил, что является основной категорией или просто категорией, тогда он должен позаботиться о связях этих категорий с другими категориями и таким образом постепенно уплотнить теорию. В результате исследователь будет себя чувствовать более уверенно с новыми возникающими категориями в процессе дальнейшего кодирования. Последующие более целенаправленные теоретические выкладки будут образовывать дополнительные, связанные с основными, категории или определения. Во время этого этапа тоже будет производиться некоторая сортировка и кодов и заметок (предположительно где-то в середине проекта). Заметки скорее всего будут становиться более подробными, суммирующими в себе информацию предыдущих заметок; или они будут сконцентрированы на заполнение провалов в теории. Ранние интеграционные диаграммы станут более усложненными, охватывающими больше концепций и больше связей между ними. Все это будет продолжаться до самого последнего этапа проекта.

Ближе к концу проекта главным задачей исследователя становится достижение интеграции. Также ему необходимо будет подумать об аудитории, для которой пишется анализ и на какие темы необходимо писать; также, в каком типе публикующихся статей необходимо сделать свою статью. Наконец, необходимо объединить всю теорию для того, чтобы представить ее в виде одной рукописи. Если над проектом работает исследовательская команда, то необходимо провести собрание, на котором решить, кто будет писать статью, кто будет докладывать, кто будет писать отдельные главы рукописи. Если же группа решит опубликовать более чем одну рукопись, то ставится вопрос о том, кто и какие рукописи будет писать или какие их части?

В довершении всего вышесказанного необходимо подчеркнуть, что ни какие последовательные этапы не могут быть заранее четко сформулированы для каждого исследовательского проекта. Каждое предприятие будет иметь свои конкретные последовательности в зависимости от того: какие данные доступны и требуются для исследования; природы данных; интерпретации исследователя; его опыта; многих обстоятельств, влияющих на самого исследователя (или на всю команду); характера аудитории, для которой будет написана рукопись; масштаба и обобщенности теории. Эти общие директивы предполагаемого проекта можно определить заранее. Основные различия между главным стилем качественного анализа и другими стилями этого анализа заключаются не в относительной непредсказуемости этапов проекта, а в различии на каждой его стадии комбинаций и взаимосвязей операций (теоретические выработки, сравнительный анализ, теоретическое уплотнение, сортировка заметок и так далее). Эти операции весьма существенны для развития плотно интегрированной теории.

Рис.2 Модель индикатора понятия

2.3 Основные операции

2.3.1 Концепции и индикаторы

Основная теория базируется на модели концепции индикатора, которая направляет концептуальное кодирование набора эмпирических индикаторов. Последние и являются настоящими данными, такими как поведение, событие, наблюдаемые или описываемые в документах или словами интервьюируемых или других информирующих лиц. Эти данные являются индикаторами концепции, получаемой из них сначала предварительно, а затем более основательно аналитиком." (Смотрите главы по кодам и заметкам и главу по иллюстрации анализа на исследовательского семинара, где даются многие примеры данной модели концепции индикатора).

Модель концепции индикатора представлена на рис.2 и основана прежде всего на постоянном сравнении индикатора с другим индикатором. То есть: многие индикаторы (действия, поведение, слежение за событиями) изучаются аналитиком в сравнении, которые затем "кодируются им", называются как индикаторы класса событий или действий поведения. Он или она могут дать этому классу название, считая это кодированной категорией. Проводя "сравнение индикатора с индикатором аналитик сталкивается с различиями, исходными чертами и разными степенями логичности значений между индикаторами. Это приводит к лежащей в их основе общности, что в свою очередь ведет к кодированной" категории. Второй процедурный этап наступает тогда, когда "уже образован концептуальный код и индикаторы сравниваются с возникающей концепцией... и в результате сравнения дополнительных индикаторов с концептуальными кодами последние становятся более четкими для наибольшего соответствия данным". В то же самое время "до тех пор пока коды не будут проверены и уплотнены могут возникать дальнейшие свойства категории". В этой модели индикаторов концепции "концепции и их измерения заработали вместо теории посредством их систематической генерации из данных... концептуальная спецификация находится в центре основной теории... потому что рабочее значение концепции исходит из использования этих разработанных отличий основной теории. Изменения индикаторов, образующие таким образом новые свойства кода, будут происходить до тех пор пока аналитик не обнаружит, что идея уплотнена посредством взаимозамены индикаторов". То есть, события и поведения, аналитически конвертируемые в индикаторы, могут быть различными по деталям, а по сути просто повторяться - но в любом случае индикаторы аналитически приводят к одному и тому же выводу. Поэтому, чем больше исследователи "находят индикаторы, играющие одинаковую роль для концепции, тем больше аналитик имеет возможность уплотнять свойства концепции для разрабатываемой возникшей теории. По мере того как исследователь просматривает данные ничего нового в этом случае не происходит. Категория и ее свойства истощают массив данных. Одновременно аналитик продолжает уплотнять другие категории, используя для этого метод постоянного сравнения".

2.3.2 Сбор данных

Имеется некоторая двойственность в термине сбор данных. Многие социологи получают данные путем полевых наблюдений, интервью, отснятия видеокассет, из стенограмм встреч и так далее. Но, как было отмечено ранее, есть и другие источники получения данных: опубликованные документы всякого рода и личные документы, такие как письма и дневники. Использование этих последних источников тоже требует определенной работы - поиск источника данных, получение доступа к ним, составление заметок по ним и в настоящее время их ксерокопирование. При некоторых видах библиотечных исследований исследователь работает в библиотеке скорее как этнограф, решая задачу поиска данных на определенных полках (книги, журналы) и как этнограф часто находит там необходимые данные (смотрите Глейзера и Штрауса, 1967г.).

Первые собранные данные могут казаться странными и исследователь может быть обескуражен их полнотой и иногда загадочной и не понятной их природой. Но в таком не понятном состоянии это все долго не пребывает, так как уже с первых дней исследования все более возможным становится анализ этих данных. Из этого также следует, что последующие интервью (первое, второе, третье) и дальнейшие наблюдения насыщаются аналитическими вопросами и гипотезами о категориях и их взаимосвязях. Данное руководство становится все более четким по мере продолжения анализа новых данных.

Сбор данных никогда не прекращается, так как кодирование и составление заметок поднимают все новые вопросы, на которые можно найти ответы только с помощью сбора новых данных и изучения уже собранных до этого данных. Теоретически направленный сбор данных часто ведет исследование к ценным дополнительным источникам данных: например, ряд целенаправленных интервью в дополнении с обычными интервью во время ежедневной полевой работы; использование опубликованных биографий в дополнении к ряду интервью. Мы называем их "доли данных", так как различные виды данных представляют разные взгляды, предоставляя возможность для дальнейшего кодирования, а также обнаруживать взаимосвязи между различными категориями, которые возникают и преобразуются в теорию.

2.3.3 Кодирование

Кодирование, как говорилось в предыдущих разделах этой книги, является очень значительной процедурой. Любой исследователь, который хочет стать профессионалом в качественном анализе, должен уметь хорошо и легко кодировать. Результаты исследования во многом зависят от умения кодировать. (См. гл.3 для примеров и дальнейших обсуждений).

Парадигма кодирования. Одно важное замечание по кодированию, которое часто не правильно бывает понято заключается в следующем: в кодирование входит обнаружение и название категорий, но исследователю кодирование должно говорить о многом другом. Например, недостаточно кодировать события через индикаторы как пример категории - к примеру "остановка механизма" - просто запись названия категории на полях страницы, где напечатаны соответствующие данные. Также, исследователь должен кодировать связанные с категорией подкатегории, отраженные в тех же самых строках, или же которые будет отражены в другом интервью полевой записи или документе. (См. особенно главы 3-5).

По этой причине мы предлагаем следующую парадигму кодирования. Она является главным ориентиром в процедуре кодирования. Сначала она только очень помогает начинающим аналитикам, но вскоре становится частью мыслительного процесса аналитика. Прямо или косвенно она напоминает ему о том, чтобы данные кодировались на связь с любым явлением, связанным с данной категорией по следующим параметрам:

условия;

взаимодействия между действующими лицами;

стратегии и тактики;

последствия.

По причине того, что начинающий исследователь иногда испытывает трудности в обнаружении "условий" в процессе изучения данных, необходимо отметить следующее. Условия очень легко обнаружить - и действительно иногда действующие лица или те, у кого берется интервью, обращают на них особенное внимание - но если это не так, то надо постараться найти реплики, в которых используются такие слова как "потому что", "так как", "как" или такие фразы как "из-за того, что". Также следствие действий тоже можно обнаружить из фраз: "в результате", "из-за этого", "результат был таким" или "последствия были такими", "в последствии". Стратегии и конкретные тактики, связанные с ними, кажется не представляются особой сложности для неопытного аналитика. Взаимодействие также легко обнаружить: это взаимодействия, происходящие между действующими лицами, не включая при этом прямое использование тактики и стратегии. Примеры того, как функционирует парадигма кодирования, будут представлены по всей этой книге. Помните, что без включения элементов парадигмы кодирование уже не будет являться кодированием.

Открытое кодирование. Первоначальный вид кодирования, проводимый во время исследовательского проекта, называется открытым кодированием. Оно представляет собой неограниченное кодирование данных. Такое открытое кодирование проводится (как это будет представлено в некоторых примерах) при помощи подробного изучения полевой записи, интервью или другого какого-либо документа: предложение за предложением или даже слово за словом. Целью такого кодирования является обнаружение концепций, наиболее подходящих к данным. Но эти концепции и их измерения пока будут все еще предварительными; обдумывая далее эти результаты с помощью различных вопросов такие же предварительные ответы приводят к возникновению дополнительных тем, вопросов, связанных с условиями и стратегией взаимодействия и последствиями. По мере того как аналитик переходит к следующим словам или строкам, этот процесс ускоряется и информация, связанная с вопросами и гипотезами, выходит наружу, а иногда даже появляются и меры категорий. Одно занятие с одним документом может удивить даже опытного исследователя, особенно, если этот документ на первый взгляд казался не очень обещающим и не было понятно, куда все это ведет. Я здесь хочу заметить, что потенциал анализа находится не столько в документах, а сколько во взаимоотношении между документом и исследователем, изучающим их, а также в опыте исследователя по открытому кодированию.

Для новичков в таком виде кодирования характерно останавливаться на споре по поводу настоящего значения предложения - или настоящих, действительных мотивах действующего лица, лежащие в основе изучаемой строки, потому что целью кодирования являются открытия для дальнейших запросов. Все интерпретации на данном этапе являются пробными. В прямом смысле слова аналитик не столько думает об этом конкретном документе, а сколько о том, что он может сделать для продолжения дальнейшие этапы исследования. То, что оказалось неверным в интерпретации предложений конкретного документа, будет в конце концов отброшено. Выяснится также, какие концепции будут работать, а какие - нет; будут выявлены отличия и определена их полезность или бесполезность - или они будут видоизменены и так далее. Таким образом опытный неопытный аналитик на этом этапе учится играть в игру доверие всему и недоверие ни чему - оставаясь при этом таким же открытым, как само кодирование. Для всего такого вида кодирования характерна базирование на данных, представленных на страницах документа, а также на экспериментальных данных, связанных с ними, включая знание технической литературы, используемой аналитиком в данном исследовании.

Такое базирование на оба типа источников данных не позволяет исследователю слишком буквально углубляться в материалы (документы, полевые записи, интервью и так далее) и слишком поспешно начать обдумывание четких рабочих концепций и взаимосвязей между ними. Такой отход от концептуализации труден даже для опытных исследователей, которые хорошо знакома сфера изучения или слишком хорошо знакомы экспериментальные данные изучаемого явления, и, по этой причине буквально утопают в своих данных. Тем не менее, концептуальный отход назад должен произойти, если исследователь желает развить теоретическое понимание явления, отраженного в экспериментальных данных. Открытое кодирование сразу же заставляет аналитика разделять данные аналитически и прямо ведет к неизбежной плате за это - основной концептуализации. На исследовательских семинарах открытое кодирование особенно важно, так как для некоторых студентов намного легче кодировать данные кого-то другого, чем свои, так как они эмоционально отстранены от них, что позволяет им с помощью процедуры открытого кодирования учиться быстрому разделению своих собственных данных.

Однако необходимо сказать несколько слов о трудностях, с которыми сталкиваются новички с образованием рабочих категорий. Характерной тенденцией исследователей является то, чтобы взять много данных (фраз, предложений) и интерпретировать их в буквальном смысле слова. Например, интервьюируемый выражает или горе, или радость, или агрессию в следующей фразе: "Мне было так плохо..." или "Я был так зол...". Начинающий аналитик пишет по этим фразам краткое понятие, интерпретирующее их напрямую эти предложения на полях страницы, где напечатано интервью, вместо того, чтобы образовывать по ним теоретические категории. (В результате они, как и многие другие исследователи, использующие другие методы анализа, остаются полностью или в основном на описательном уровне, не очень отличающемся от самих действующих лиц). Однако, если медсестра говорит исследователю, что она " покинув помещение старалась сохранить самообладание в то время, когда пациент кричал", то эту фразу можно интерпретировать аналитически как "профессиональное самообладание", включая заметки о структурных условиях, выражающих ее самообладание, и о тактике, которую она использует для его сохранения. Такой подход к анализу приводит к тому, что исследователь может составить заметку, в которой поднимается вопрос о других, более подходящих условий и тактике, а также о ситуации, при которой тактика медсестры ей не помогла, или же она не смогла ее применять и таким образом потеряла самообладание.

В нашей практике обучения самым трудным этапом (кроме интеграции всего анализа в целом) для начинающих в таком стиле анализа является конкретное начало настоящего кодирования. Они очень расстраиваются пока не научатся этому. И все же, является совершенно необходимым условием обучение этому навыку, так как все остальное основано на нем. Кроме основного руководства, которое представлено ниже (а также в главе 3 по кодированию), нам кажется, что для обучения студентов также будет полезно следующее правило большого пальца:

1. Ищите живые коды, термины, которые используются людьми, изучаемыми вами. Например, фраза медсестры - "старалась сохранить самообладание".

2. Дайте предварительное название каждому коду, живому или сконструированному. Сначала не слишком беспокойтесь о том, чтобы название кода подходило к категории, просто назовите его как-то.

3. Задавайте большое количество вопросов к словам, фразам, предложениям, действиям в анализе строка за строкой.

4. Сразу же перейдите к мерам, которые кажутся наиболее подходящими к данным словам, фразам и так далее.

5. Эти меры сразу же должны привести к возникновению сравнительных случаев, но если этого не произойдет, то постарайтесь эти сравнительные случаи.

6. Уделяйте внимание элементам парадигмы кодирования, которые были предложены выше.

Имеется несколько дополнительных руководств по открытому кодированию, которые способствуют правильному и успешному его использованию. "Первое - это задать по данным ряд вопросов. Эти вопросы необходимо иметь в виду прямо с самого начала. Основным вопросом является следующий: К какой стадии исследования 0 1подходят эти данные? Этот вопрос напоминает исследователю о том, что начальная идея исследования может оказаться неправильной - по нашему опыту чаще так и бывает. (Примеры, взятые из исследовательских семинаров, показывают, как это происходит). Другой вопрос, который необходимо себе задавать постоянно пока изучаются данные, следующий - На какую категорию указывает данное обстоятельство? Это будет краткой формой вопроса. Длинная форма является такой:- На какую категорию, или свойство категории, или часть возникающей теории указывает определенные данные ? По мере того, как теория все лучше формулируется, на этот вопрос все легче становится отвечать. По причине того, что аналитик во время анализа все время задает себе этот вопрос, он не теряется в большом разнообразии данных, не формирует создание кодов, связанных с другими кодами. В конечном итоге аналитик все время задает себе вопрос: что на самом деле происходит с данными? каковы основные проблемы, с которыми сталкиваются участники? в чем причина их основной проблемы или проблем? [По другому это можно сформулировать так: какова здесь основная история и почему?]. Все эти вопросы ведут к образованию основной категории или категорий, которые будут в центре теории и в центре самого процесса написания теории".

Второе руководство по открытому кодированию (если помните, это прежде всего начальная процедура кодирования) предлагает сразу же анализировать данные. Как было отмечено уже несколько раз ранее, необходимо сразу же часто кодировать. Это очень необходимо "для достижения широкой теоретической сферы, которая полностью основана на данных". Совершенно "другим подходом к открытому кодированию (обозревательный подход) является достаточно быстрое прочтение данных, что создаст на первом впечатлении от этого прочтения множество категорий. Мы не рекомендуем такой подход как таковой, так как он привносит только некоторые идеи и не приводит к эволюции концептуальной плотности. К тому же, после него становится не ясным, что было упущено. Если продолжать его применять, то теория будет плохо интегрирована и концептуально неплотной."

Более микроскопический подход к открытому кодированию "уменьшает вероятность упущения важный категорий и приводит в конечном итоге к концептуально плотной теории, вселяет уверенность читателю и самому и самому аналитику в том, что наверное не было ничего весьма важного упущено" в теории, и способствует проверки и определению самой теории. Тем не менее, мы должны отметить, что, если код кажется относительно плотным, и в этом случае "ничего нового не происходит", то аналитик может увидеть, что он продвигается достаточно быстро по данном, наталкиваясь на повторение при изучении их строка за строкой, и по этому вынужден просматривать большое количество страниц прежде чем не увидит что-то новое, после чего опять можно начать их изучение. Конечно, дополнительный сбор данных, особенно тогда, когда он производится с помощью тщательных теоретических выкладок, дополненных воображением, опять же требует микроскопического анализа. (Пример случая на семинаре, приведенной в этой книге, очень четко показывает такое плотное изучение и то, как студенты на долгое время задерживают свое внимания на определенных словах, фразах, предложениях при проведении анализа строка за строкой).

Таким образом, данный вид интенсивного анализа можно проводить время от времени. Правило большого пальца подсказывает как проводить этот анализ, если возникает чувство, что какие-то части всего анализа не удовлетворительны, или, что с помощью дополнительного открытого кодирования можно обнаружить важную взаимосвязь между категориями. Конечно, учитывая то, что обычно данных бывает весьма значительное количество, нельзя проводить постоянно открытое кодирование - но в этом и нет смысла. Однако, если возникает чувство, что было бы снова полезно провести открытое кодирование, то не надо откладывать это. Чем быстрее оно будет проведено, тем лучше, так как оно может сразу же привести к теоретическим выработкам и несколько перенаправить сбор данных.

Третьим по счету важным руководством по открытому кодированию будет следующее: "часто прерывайте кодирования для того, чтобы сделать теоретическую заметку. Это приводит к их накоплению и на необходимое отдалению аналитика от практических данных в аналитическую область". Четвертым руководством является следующее указание: "Аналитик не должен предполагать, что любое традиционное неизвестное является аналитически важным (например, такие как возраст, пол, социальная принадлежность, раса) до тех пор пока это неизвестное станет действительно значительным для анализа. Они тоже должны заработать свое место в основной теории".

Важно осознавать, что "открытое кодирование проверяет и уплотняет отдельные коды". В начале они представляются достаточно грубыми и по этой причине их необходимо несколько видоизменять. В любом случае они являются предварительными и по этой причине в конечном итоге будет существенно изменены, усложнены и так далее. Поэтому аналитик не должен слишком увлекаться начальными кодами и не должен "слишком уж тщательно вести отбор, хотя это и представляется весьма соблазнительным, так как начальные кода могут казаться очень важными и подходящим в то время, как на самом деле таковыми не являются. Открытое кодирование очень быстро порождает множество кодов, но позднее этот процесс несколько замедляется по причине постоянной проверки каждого из них, что бы удостовериться в его значимости... В конце концов код становится уплотненным и определяется его взаимосвязь с другими кодами, включая его взаимосвязь с основной категорией или категориями - если сам он не является основной категорией".

Осевое кодирование. Осевое кодирование является существенным аспектом открытого кодирования. Оно состоит из интенсивного анализа, который проводиться поочередно вокруг каждой категории относительно парадигмы кодирования (условия, последствия и так далее). В результате происходит накопление знаний о взаимосвязях между данной категорией и другими категориями и подкатегориями. Удобным термином для этой процедуры является осевое кодирование, так как анализ крутится вокруг оси поочередно каждой категории. Осевое кодирование чаще всего не проводится на ранней стадии кодирования или даже в первые недели, в которые происходит только сбор и анализ данных. Однако оно становится более значительным во время обычно достаточно продолжительного периода открытого кодирования перед тем, как аналитик выявляет основную категорию или категории, что позволяет перейти к решительному селекционному отборочному кодированию (это будет обсуждаться в следующем разделе). Однако, в период открытого кодирования весьма направленное осевое кодирование сменяется менее направленным открытым кодированием, особенно по мере того, как аналитик изучает новые аспекты явления. Все это происходит также параллельно спецификации большого числа взаимосвязей между многими категориями даже в том случае, если эта часть кодирования проводится также интенсивно как и осевое кодирование или не так интенсивно. Конечно, в рамках этого все более уплотняющегося полотна концептуализации проводятся связки с категориями, которые в конечном итоге будут определены как "главные".

Выборочное кодирование. Выборочное кодирование связано с систематическим процессом кодирования и направлено на выявление основной категории. "Все остальные коды подчиняются основному коду, на котом фокусируется внимание. Для того, чтобы проводить селекционное кодирование необходимо, чтобы аналитик ограничивал кодирование только теми кодами, которые связаны с основными кодами". Основной код становится руководящим для дальнейших теоретических выработок и сбора данных. Аналитик ищет условия, последствия и так далее, связанные с основной категорией, и кодирует для этих элементов. Таким образом, селекционное кодирование отличается от открытого кодирование, но проводится в рамках контекста, разработанного в период открытого кодирования. Во время селекционного, выборочного кодирования аналитические заметки становятся более направленными, что помогает интегрировать теорию. Селекционную кодирование может начаться достаточно рано и становится доминирующим, так как оно является более сознательно систематическим, чем открытое кодирование.

2.3.4 Социологически сконструированные коды и живые коды

"Категории бывают двух видов" - социологические конструкции и живые коды. последние берутся или происходят прямо из языка содержательной сферы: Особенно термины, используемые действующими лицами в этой сфере". Часто, когда проводится открытое кодирование, исследователь слышит как действующие лица используют эти термины и включает их в свой анализ. "Живые коды обычно описывают процессы поведения, которые объясняют аналитику каким образом решаются основные проблемы действующих лиц. Эти коды прямо разделяют данные, так как они представляют собой аналитические категории, используемые исследователем." Они также могут привести к образованию связанных с ними теоретических кодов: ""например, мониторинг" клинических условий пациента, включает в себя и действующие лица (обычно это проявляется в различных условиях, в которых происходит мониторинг, в его последствиях и так далее)."

Живые коды "обладают двумя характеристиками: аналитическая польза и образность. Их аналитическая польза связывает данную категорию с другими, с ее конкретным значением, что прямо приводит к формулировки теории. Образная система важна постольку, поскольку аналитику не приходится приводить примеры кода для обозначения его значения. Его образ включает в себя данные, которые обладают достаточным значением для возможности позволяющей не включать аналитику в свою статью излишнее количество иллюстрирующих примеров. Живые термины обладают весьма яркой образной системой, включают в себя очень много местных интерпретационных значений. По причине их яркости читатель их редко забывает. Они также обладают большой аналитической силой, так как действующие лица с легкостью их используют и в достаточно ясном значении".

"Социологические конструкции, с другой стороны, являются кодами, сформулированными социологами ("контекст осведомленности", "траектория болезни")". (Конечно, конструкции не обязательно должны быть социологическими, и могут быть также психологическими или антропологическими и так далее, в зависимости от формулируемой дисциплинарной теории). Эти конструкции "основываются на комбинировании знаний исследователя в научных области и содержательных знаний в изучаемой им области. В результате такого комбинирования они могут придать анализу больше социологического значения, чем просто живые коды. В этом случае они также расширяют сферу анализа, так как выходят за рамки местного значения к более широким социологическим проблемам и задачам. Они также обладают большой аналитической полезностью, так как конструируются достаточно систематически и точно. В них мало образности (некоторые аналитики считают, что чем они больше плоские, ясные, конкретные, тем больше научны и меньше основаны на впечатлениях; но другим больше нравится, когда коды более образны)".

В предлагаемых ниже примерах читатели увидят, что аналитики образуют много живых и социологических кодов. Как было отмечено ранее, такое построение кодов является предварительным, а также и их наименование является предварительным, что можно быстро изменить в случае нахождения более удачных для них терминов. Важно, чтобы исследователи чувствовали свободу в возможности изменять и изобретать эти термины. "Нет необходимости в борьбе за нахождение точного, правильного термина, особенно, если исследователь впервые заметил какое-либо явление, которое он желает наименовать - важным в этом случае будет то, чтобы разглядеть этот код, а после этого изобрести название и применить термин, наиболее отражающий этот код, так чтобы на эту категорию можно было ссылаться, сосредоточиться на ней и помнить о ней". Аналитик может научиться давать эти названия со значительной степенью легкости после некоторого опыта проведения такого вида качественного анализа. Конечно же, такой навык является не просто лингвистическим, но повышает и теоретическую восприимчивость и связанную с ней аналитические способности.

2.3.5 Основные категории

"Основная теория должна отвечать образцам поведения тех, кто вовлечен в какую-либо ситуацию. Образование теории происходит вокруг главной категории (иногда нескольких категорий)". "Так как основная категория отвечает за основной вариант образа поведения", то "основная категория обладает несколькими важными функциями для образования теории. Они работают во всех случаях. Большинство других категорий и их свойства связаны с ними, по причине чего основную категорию часто приходится менять. В конечном итоге в результате этих взаимосвязей категорий и их свойств главная роль основной категории сводится к интеграции и уплотнении теории по мере обнаружения этих взаимосвязей. Данные функции затем приводят к теоретической полноте".

"Аналитик должен сознательно искать основной неизвестное при кодировании данных. Постоянно сравнивая обстоятельства и концепции он вынужден образовывать много кодов, будучи при этом все время начеку, чтобы распознать основную категорию в них. Аналитик постоянно должен высматривать основную тему, которая является основной для людей, описываемых в явлении, а также находить то, что суммирует образы их поведения, содержание которых находится в данных, и искать суть того, что отражено в этих данных". (Как было ранее отмечено, необходимо задаться вопросом: какова сама история вопроса? Этот вопрос является своего рода девизом, который аналитик постоянно должен себе задавать для собственного напоминания необходимости ответа на поставленные вопросы).

"По мере того, как аналитик задает себе подобные вопросы в процессе анализа, он начинает ощущать потенциальные ответы на них". "Возможным основным категориям необходимо дать наиболее подходящие наименования как можно скорее, чтобы было удобнее их анализировать, а также проводить анализ относительно их. Исследователь может чувствовать, какая категория является основной, но может оказаться не способным сформулировать ее так как ему бы хотелось, по этой причине он должен использовать ее предварительное наименования до нахождения более лучшей формулировки."

"После того, как будут разработаны несколько рабочих кодированных категорий, аналитик должен попытаться аналитически уплотнить, на сколько это возможно, те категории, которые обладают объяснительно силой". Поэтому взаимосвязь между категориями и их свойствами становится очевидной и концептуально плотной. Теоретические выкладки проводятся для того, чтобы способствовать уплотнению категорий, так как данные категории связаны со многими другими, и часто возникают в данных. С качественным анализом "эти взаимоотношения, взаимосвязи должны быть отражены в заметках, которые потом необходимо рассортировать" и встроить в интеграционные заметки. "Основную категорию необходимо все время подтверждать с помощью доминирующих ее связей с другими категориями".

"Чем больше данных, тем увереннее аналитик может узнавать о том, что он выбрал в качестве основной категории. Время и данными могут быть дорогими; при небольших исследованиях аналитик часто вынужден идти наудачу: и конечно же, определение основной категории проверяет его навык и способности. Если аналитик слишком быстро определяет ее, используя при этом небольшое количество данных, то в этом случае возникает риск возможной остановки исследования из-за недостаточной развитости теории, то есть по причине не достаточной ее интегрированности и необходимой объяснительной способности".

Существуют некоторые критерии для оценки того, является ли категория основной.

1."Она должна быть центральной, то есть связанной с как можно большим количеством других категорий и их свойств, и при этом доминировать в этом качестве над остальными кандидатами на определение "основная категория". Этот критерий является необходимым условием для того, чтобы поставить в центр анализа какую-либо категорию: он указывает на то, что категория за большую часть вариантов образов поведения".

2."Основная категория должна часто появляться в данных. (Более точно: указатели, показывающие на феномен, представленный этой основной категорией, должны появляться часто). Часто появляясь, основная категория тем самым становится стабильным образцом и следовательно все больше связывается аналитиком с другими категориями. Если она встречается нечасто, то это не означает, что она не интересна, а просто необходимо знать, что это - неосновная категория".

3."Основную категорию можно довольно легко связать с другими категориями. Эти связи не нужно форсировать; а наоборот, они сами приходят в голову в большом количестве. Но по причине того, что основная категория связана со многими другими категориями и постоянно появляется, требуется для ее выявления много времени".

4.Основная категория в содержательным исследовании обладает выраженными предпосылками для более общей теории. (См. главу 11 по образованию разработки формальной теории). Таким образом, аналитик, например наблюдающей за сменой персонала в госпитале, рано или поздно обнаруживает базисные предпосылки условий для смены 2-х - 4-х часовой работы в госпитале и начинает понимать каким образом будет идти разработка теории о смене персонала в различных организациях. Однако, разные аналитические операция, которые за этим должны последовать, должны использовать данные относительно большей сменности персонала из различных содержательных областей. Интенсивное изучение таких данных конечно же необходимо до тех пор пока основная категория или категории основной общей теории не будет определена".

5.По мере разработки деталей основной категории теория в достаточной степени продвигается вперед".

6.Основная категория позволяет строить анализ на максимальное число вариантов, по мере того как исследователь кодирует относительно ее мер, свойств, условий, последствий, стратегии и так далее". Все они связаны с разными подобразцами явления, описываемого основной категорией. Такие вариации, по выражению одного из коллег, чаще всего, акцентируются в количественном анализе, чем в рассуждениях качественного анализа. Он высказался правильно, так как многие качественные аналитики не пытаются найти варианты, но желают видеть общий образец. Тем не менее главной чертой основной категории являются вариации. (См. дополнительные замечания по этой теме немного позднее).

2.3.6 Кто должен проводить кодирование?

Когда дело касается одного исследователя, который работает над свои проектом, ответ на этот вопрос очевиден. Но что делать в случае, когда группа исследователь работает совместно над проектом? Все ли члены этой группы должны кодировать, или только самые опытные, продуктивные и талантливые в этом отношении из них; или же отдать предпочтение профессору, а не студенту-ассистенту; или в случае большого проекта самой лучшей группе, а не самим сборщикам данных? Несколько лет назад качественный исследователь Джулио Ротт (1963 год) строго критиковал основных исследователей обозревательных исследований за их эксплуатацию "нанятых рук - нанятой рабочей силы", которые занимались только грязной работой - сбором данных, сравнивая эту ситуацию с большим числом обязанности и степенью вовлеченностью типичного полевого работника , который конечно же проводил всю исследовательскую работу, а также мыслительную работу по кодированию. Это два эсктремальных варианта ответа на вопрос о том, кто должен проводить кодирование.

Однако, наиболее удачным ответом на этот вопрос может быть тот, который вытекает из структурных и организационных условий, относящихся к проекту, и зависит от целей самого проекта и его будущей аудитории. Например, большой качественный проект, руководимый двумя профессорами из дома, имеющие цель быстро достичь "хороших результатов" (по причинам карьеры) могут дать ответ на вопрос, кто должен кодировать, совсем по-другому, чем в случае небольшой группы, состоящей из ровесников (см. Майуса, 1983 год, стр. 131-132). В этом смысле необходимо подумать о значении организационных условий, таких как размер гранта, количество обследуемых местоположений, количество данных, которые необходимо собрать, количество членов группы, их равноправность. Структура команды может соответственно выглядеть по-другому: некоторые более иерархичные, другие основаны на совместном труде и так далее. Но также целью структуры проекта может быть достижение быстрых или наиболее лучших результатов, или наиболее эффективных для данной предполагаемой аудитории. Или же ее целью может быть улучшение креативности каждого члена команды или же всей команды в целом, которая собирается проводить совместные исследования и в дальнейшем. Результатом все подобной продуктивной исследовательской деятельности могут стать различные вещи во время проведения данного проекта: совместно написанная рукопись или несколько рукописей, написанных различными членами команды, отдельные или совместные статьи и так далее.

Таким образом, ответ на вопрос по кодированию неизбежно будет связан с представленными выше соображениями. Каждый член команды может кодировать свои собственные материалы, так как он с ними лучше других ознакомлен. Но на групповой встрече члены команды могут начать кодировать вместе представленный материал, включая индивидуально собранные данные для аналитического обсуждения. (См. главу 6, где приводятся примеры этому). Также член группы может кодировать данные другого члена группы, после ознакомления заметки, составленной этим членом группы. Или же два члена группы могут встретится для того, чтобы провести совместное кодирование.

...

Подобные документы

  • Определение креативности с социологической точки зрения и в различных науках. Креативность действия, различие подходов в теориях социального действия М. Вебера, Э. Дюркгейма и Х. Йоаса. Возможности применения теории Ханса Йоаса к анализу социальной жизни.

    курсовая работа [48,3 K], добавлен 25.08.2012

  • Общая характеристика социальных проблем. Изучение причин основных социальных проблем среди молодежи. Рассмотрение факторов, которые влияют на благополучие молодежи. Описание проведения социологического опроса по данной теме; анализ ответов опроса.

    курсовая работа [1,3 M], добавлен 02.11.2014

  • Современные методы прикладных социальных исследований. Социологическая информация и ее виды. Данные, содержащиеся в официальных документах. Информация, собираемая с помощью массовых опросов. Данные, полученные с помощью опросов экспертов, а также СМИ.

    курсовая работа [36,6 K], добавлен 09.11.2008

  • Психоанализ Фрейда и его политические импликации. Взаимоотношения Эроса и цивилизации в синтетической теории Герберта Маркузе. Порно в дискурсе социальной критики. В поисках идентификации: взгляд зрителя порно. От монистического анализа к дуалистическому.

    магистерская работа [98,9 K], добавлен 22.01.2016

  • Проблемы социального обеспечения населения в Российской Федерации. Понятие "льгота" и ее сущность, предпосылки развития в России. Анализ льготной системы до проведения преобразований, причина проведения реформы по монетизации и разработка мероприятий.

    курсовая работа [1,3 M], добавлен 15.05.2009

  • Сущность понятий "класс" и "классовая система", исследование различных подходов к их определению и разрешению. Теории социальной стратификации в работах социологов, социальных мыслителей, их специфические особенности, сравнение с кастой и сословием.

    контрольная работа [26,0 K], добавлен 30.11.2010

  • Макросоциологические теории. Социоструктурный анализ статусных и политических позиций молодежи должен быть дополнен качественным анализом ее самосознания (с помощью качественных методов социологии), где выражено переживание кризисного состояния социума.

    курсовая работа [42,8 K], добавлен 30.12.2008

  • Термин "инновация". Классические представления об инновациях, их создание, освоение, внедрение и распространение. Инноватика как отрасль теории изменения системы. Понятие диффузии в социальных науках. Особенности механизма распространения инноваций.

    контрольная работа [881,2 K], добавлен 23.07.2014

  • Теоретическое обоснование проблемы интерпретации результатов социологических исследований. Определение и виды социологических исследований, процедура анализа их результатов. Практическое применение интерпретации данных социологических исследований.

    курсовая работа [52,3 K], добавлен 10.01.2011

  • Структурный анализ как один из методов интерпретации и обобщения социологических исследований. Объект, предмет, методы, этапы проведения и функциональные возможности cтpyктypнoгo aнaлизa. Особенности применения структурной методологии в книговедении.

    реферат [48,9 K], добавлен 17.05.2011

  • Понятие и сущность анкетных опросов, требования к их проведению и классификация вопросов. Анализ проблемы достоверности получаемой информации. Виды, принципы и правила проведения интервью. Основные методы анализа и классификации документов в социологии.

    реферат [38,8 K], добавлен 01.02.2010

  • Подготовка эмпирических данных к обработке и анализу. Сущность и виды группировок, понятие рядов распределения. Графическое представление информации в анализе социологических данных. Структура и требования к отчету о социологическом исследовании.

    контрольная работа [320,8 K], добавлен 05.04.2011

  • Рассмотрение проблемы социального неравенства в трудах П.А. Кропоткина, Э. Дюркгейма и М. Вебера. Изучение функционалистского и марксистского подхода к данной теме. Исторический пример фактического отсутствия государственной власти в Республике Сомали.

    эссе [15,8 K], добавлен 02.10.2014

  • Социальные ценности и нормы культуры. Специфика социального подхода к анализу культуры. Социальная стратификация: понятие, происхождение, теории. Социальный контроль и девиантное поведение. Характеристика социальных общностей "аудитория" и "толпа".

    контрольная работа [55,8 K], добавлен 15.02.2012

  • Система подготовки социальных работников в России. Социальная работа как учебная дисциплина. Проблемы профессионального воспитания и обучения специалиста по социальной работе. Принципы профессионального воспитания.

    курсовая работа [30,8 K], добавлен 30.07.2007

  • Проблемы развития и функционирования общества, места в нем человеческой личности. Позитивное значение отклонения от социально одобряемых целей и ценностей общества по теории Дюркгейма. Социальные функции и статус. Теории общества Парсонса и Миллса.

    реферат [34,8 K], добавлен 03.12.2009

  • Понятие социологического исследования. Подготовка эмпирических данных к обработке и анализу. Сущность и виды группировок. Таблицы и графики: их роль в анализе социологических данных. Структура отчета об исследовании. Основные требования к его составлению.

    контрольная работа [542,4 K], добавлен 10.11.2010

  • Системные циклы накопления. Особенности капиталистического мира-экономики. Перспективы развития капиталистического мира-экономики. Категории мир-системного анализа Арриги и особенности интерпретации современного мирового порядка в рамках данной теории.

    курсовая работа [66,4 K], добавлен 07.05.2016

  • Логические схемы социологии. Терминологический словарь. Пример социологического рассказа. Анализ теорий 2-х социологов. Социальные институты, общности, группы, организации. Социологическое исследование. Методы сбора и анализа социальной информации.

    контрольная работа [134,3 K], добавлен 12.03.2009

  • Интерес социологической науки к феномену стереотипа, отнесение его к разряду регулирующих начал социального поведения личности. Стереотип в концепциях современных социологов и социологов конца XIX и XX века. Психологический подход к пониманию стереотипа.

    реферат [23,6 K], добавлен 25.11.2011

Работы в архивах красиво оформлены согласно требованиям ВУЗов и содержат рисунки, диаграммы, формулы и т.д.
PPT, PPTX и PDF-файлы представлены только в архивах.
Рекомендуем скачать работу.