Размещено на http://www.allbest.ru/

ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ АВТОНОМНОЕ

ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ ВЫСШЕГО ОБРАЗОВАНИЯ

“НАЦИОНАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ УНИВЕРСИТЕТ

“ВЫСШАЯ ШКОЛА ЭКОНОМИКИ”

Факультет гуманитарных наук

Программа подготовки бакалавров по направлению

45.03.03 “Фундаментальная и прикладная лингвистика”

ВЫПУСКНАЯ КВАЛИФИКАЦИОННАЯ РАБОТА

Автоматическое определение психотипа автора текста

Земляк Виктория Михайловна

Рецензент канд. филол. н., доц.

А.Ю. Малафеев

Научный руководитель Т.В. Романова

Нижний Новгород, 2018

Содержание

• Введение
• Глава I. Язык и сознание
• Глава 2. Психологическая типология личности
• 2.1 Определение понятия “психотип”
• 2.2 Современные психологические классификации
• Глава 3. Речевые признаки психотипов
• 3.1 Описание материала и характера лингвистического анализа
• 3.2 Статистические речевые маркеры
• Глава 4. Автоматическая классификация текстов
• 4.1 Предобработка и векторизация текстов
• 4.2 Методы машинного обучения
• 4.3 Нейронные сети для классификации текстов
• 4.4 Результаты классификации
• Заключение
• Библиографический список
• Приложение. Психологическая анкета

Введение

Настоящая работа посвящена исследованию корреляции между психологическими и лингвистическими характеристиками индивида, анализу психотипа человека как параметра его личности по лингвистическому критерию и проверке точности автоматического определения психотипа человека по его речевым особенностям. В практической части исследования используются методы компьютерной лингвистики; теоретические основы работы лежат в области психолингвистики.

Существование связи между языком и сознанием, языком и мышлением неоспоримо. Теории о структуре, развитии и становлении языка так или иначе затрагивают вопрос об устройстве и развитии сознания. Феномен сознания получил осмысление в трудах многочисленных отечественных и зарубежных философов, психологов и лингвистов. Например, в “Избранных психологических произведениях” А.Н. Леонтьева представлена наиболее распространенная точка зрения, согласно которой при характеристике сознания во главу угла ставится психическая функция восприятия (Леонтьев, 1983). Швейцарский психиатр К. Г. Юнг в произведении “Психологические типы” еще более подробно акцентирует внимание на феномене человеческого восприятия, приводя его классификацию на основе индивидуальных особенностей психики (Юнг, 1995).

В коллективной монографии “Язык и сознание: парадоксальная рациональность” под редакцией психолингвиста Е.Ф. Тарасова понятие “сознание” отождествляется с понятием “языковое сознание” (Тарасов, 1993). Книга посвящена исследованию взаимосвязи психических процессов и их речевых реализаций и включает статьи отечественных лингвистов и психологов. При этом в более современном сборнике “Языковое сознание и образ мира” Е.Ф. Тарасов уже дифференцирует понятия “сознание” и “языковое сознание” (Тарасов, 1993).

Лингвокогнитивные аспекты коммуникации описаны и проанализированы в книге другого отечественного лингвиста, В.В. Красных “Виртуальная реальность или реальная виртуальность? (Человек. Сознание. Коммуникация)” (Красных, 1998). Автор предлагает модель производства и восприятия текста, а также модель и матрицу целого коммуникативного акта. В.В. Красных отмечает национальную специфику речевого и коммуникативного поведения и наличие факторов, ее предопределяющих.

Взаимоотношения языковой личности и языкового сознания рассматриваются В.И. Карасиком в монографии “Языковой круг. Личность, концепты, дискурс”. Автор представляет языковую личность как некое соединяющее звено между языковым сознанием и осознанным речевым поведением. По мнению В.И. Карасика, “лингвистическое изучение языковой личности базируется на тех психологических и социологических признаках, которые находят выражение в языковой семантике и прагматике и позволяют построить типологию языковых личностей” (Карасик, 2002: 298). Таким образом, эти признаки автор выделяет как основу классификации языковых личностей и отмечает, что на них основывается лингвистическое изучение языковой личности в целом.

Объектом данного исследования является языковая личность пользователей веб-форума “Клуб Квадра” (http://www.socioforum.su/), проявляющаяся в их комментариях и сообщениях (их лингвистических особенностях) на данном форуме. Предметом изучения являются лингвистические параметры психотипа того или иного пользователя. Соответственно, психотип языковой личности в данном исследовании представляется как один из аспектов ее характеристики.

В качестве материала для исследовательской работы были использованы заполненные психологические анкеты 240 респондентов - пользователей форума. Данный форум является наиболее крупным онлайн-сообществом, в котором проводится точное психологическое тестирование его посетителей. Таким образом, представляется возможным провести лингвистический анализ виртуальных сообщений и комментариев посетителей форума, психотип каждого из которых известен, и выявить языковые маркеры, характерные для каждого психотипа.

Выбор материала обусловлен переходом общения из реальной в виртуальную среду, характерным для XXI века. Сегодня люди обмениваются информацией, познают себя и друг друга не только в реальном общении, но и через виртуальные коммуникации, поэтому тексты, размещенные в интернет-пространстве - это огромное поле для психолингвистических исследований. Кроме того, тема исследования актуальна из-за стремительно возросшей популярности психологии в настоящее время. Современный человек начинает искать ответы на многие извечные вопросы в самом себе, и изучение мышления и его разнообразных проявлений - один из важных векторов современных научных интересов.

Практическая часть выпускной квалификационной работы включает ручной и автоматический анализ текстов респондентов, предваряемый подготовкой теоретической базы исследования. Работу можно разделить на несколько последовательных этапов и соответствующих задач:

1. Определить понятия сознания и психотипа с позиции их взаимосвязи с языком. На сегодняшний день эти феномены остаются не изученными до конца, и разные ученые по-разному их определяют и характеризуют. Соответственно, необходимо создать обширную теоретическую базу для исследования, рассмотрев и проанализировав существующие взгляды на проблему определения указанных понятий.

2. Проанализировать основные классификации психотипов, выбрать подходящую для исследования. Существует множество психологических типологий, но не все из них рассматривают лингвистические параметры того или иного психотипа. Например, широко известна и популяризована в настоящее время классификация психологических типов, разработанная швейцарским психиатром К.Г. Юнгом. Согласно данной классификации, каждый тип характеризует определенная психологическая установка и преобладание той или иной психической функции (Юнг, 1995). Литовский лингвист А. Аугустинавичюте разработала популярную концепцию, основанную на классификации К.Г. Юнга, дополнив ее еще одним значительным признаком: характеристика типов с оригинальной позиции информационного метаболизма (Аугустинавичюте, 2008).

Детальная классификация психологических типов языковой личности разработана С.А. Сухих и включает в себя описание лингвистических особенностей каждого психотипа (Сухих, 1993). Таким образом, с точки зрения психолингвистики уместно противопоставить типы личностей, выделяемые в психологии, и рассмотреть языковые и речевые способы проявления основных черт психотипов.

3. Вручную проанализировать 240 текстов, выделив на разных языковых уровнях характерные вербальные маркеры психотипов, из которых предстояло выбрать подходящие для автоматической обработки.

Такие признаки легли в основу программы-анализатора, которая была использована для векторизации текстов, т.е. преобразования текстов на естественном языке в числовые векторы, доступные для автоматической обработки. Полученные векторы стали обучающими данными для классификаторов.

4. Провести автоматический анализ и векторизовать тексты разными способами на основе различных комбинаций выявленных речевых признаков и языковых моделей, сформировав обучающую выборку (training set) для последующей классификации.

5. Проверить точность определения психотипа на текстах, отсутствующих в базе данных (validation set), с помощью различных методов классификации текстов: метода k ближайших соседей, машины опорных векторов, случайного леса, рекуррентных нейронных сетей и полносвязной многослойной нейронной сети.

6. Cделать выводы о возможности определения психотипа по тексту и репрезентативности выбранных речевых признаков.

Классический анализ языковой личности индивида с учетом ее психологических характеристик представлен, например, в работах Т.В. Романовой. В частности, в статье “Современная языковая личность с точки зрения лингвоконфликтологии” (Романова, 20) характеризуется проявление разных типов языковой личности, выделенных К.Ф. Седовым, в ситуациях конфликтного общения. Автор подробно рассматривает уровни речевой коммуникации, имеющие отношение к вербальной агрессии.

Для проведения данного исследования необходимо воспользоваться определенными теоретическими и практическими общенаучными методами. Теоретические методы, использовавшиеся в ходе исследования: анализ (анализ существующей научной литературы, анализ классификаций психотипов, анализ конкретных результатов виртуально-текстовой речевой деятельности интернет-пользователей), сравнение (необходимо сравнить различные классификации и описания психотипов, а также соответствующие выбранной классификации конкретные психотипы), абстрагирование (выход на уровень абстракции позволяет сделать общие выводы по той или иной части исследования).

Эмпирические: описание (описание психотипов, классификаций, понятий), компьютерный анализ текста (определение морфологической формы каждого слова и выявление частотных закономерностей трудновыполнимо без использования специальных программ), автоматическая классификация текстов и определение точности результатов классификации. психотип язык личность маркер

Ключевыми методами, с помощью которого возможно осуществление компьютерного анализа виртуальной речи пользователей и ее (речи) векторизация, стали:

1. Частотный анализ - определение относительной частоты каждого признака (параметра) в каждом тексте с последующим представлением текстов в виде списка числовых значений каждого такого параметра. Проведение данного анализа не представляется возможным без предварительной обработки исследуемых текстов специальной компьютерной утилитой mystem от компании Яндекс. Порядок ее использования в конкретном исследовании таков:

а) Файл с исследуемым текстом в формате .txt загружается в программу, запускается его обработка.

б) Результатом автоматической обработки становится генерирование нового документа. В нем содержится исходный текст, однако после каждой словоформы в скобках представлена ее морфологическая характеристика.

В частности, глагол характеризуется временем, числом, лицом, наклонением и, если это релевантно, особой формой реализации (причастие, деепричастие, инфинитив). Прилагательное характеризуется родом, числом, падежом и разрядом. Существительное, в свою очередь, в программе определяется следующими категориями: одушевленность/неодушевленность, род, число, падеж. Наконец, местоименные слова характеризуются по грамматической отнесенности к классу существительных или прилагательных.

2. Погружения слов (word embeddings) - представление каждого слова текста в виде семантического вектора, где каждое число кодирует некоторый семантический параметр. Данная технология реализована в библиотеках word2vec (http://rusvectores.org/ru) и fasttext (http://github.com/facebookresearch/fastText) и основана на анализе контекстного употребления слов.

Алгоритм классификатора базируется на машинном обучении; в частности, в нем используются такие техники классификации, как метод k ближайших соседей, машина опорных векторов, случайный лес, рекуррентные нейронные сети и многослойная полносвязная нейронная сеть.

Выполнение поставленных задач при помощи определенных методов формирует структуру исследования. Работа состоит из введения, четырех глав, библиографического списка и приложений. Во введении характеризуется проблематика исследования, его цель и задачи, формулируется рабочая гипотеза, представлены использованные методы, разграничены и описаны объект и предмет исследования.

Первые две главы взаимосвязаны и посвящены теоретическому осмыслению проблемы, в них определяются понятия языковой личности, сознания и психотипа, анализируются основные классификации психотипов и аргументируется выбор определенной классификации для дальнейшего исследования. Третья глава представляет собой первую часть практического исследования - лингвистический анализ текстов респондентов. Наконец, четвертая глава посвящена отбору методов и автоматической классификации текстов на языке программирования Python 3 с применением дополнительных библиотек scikit-learn, numpy, pandas, keras и утилиты mystem.

Каждая глава завершается выводом - промежуточным подведением итогов по той или иной части исследования. С окончанием глав заканчивается основная часть работы. За ней следует Заключение, в котором представлен обобщенный результат проведенного исследования и определены перспективы дальнейшей разработки поставленной проблемы.

Глава I. Язык и сознание

Понятия “язык”, “сознание”, “языковое сознание” нельзя отнести к какой-либо конкретной научной области. На протяжении нескольких столетий они рассматривались сначала сугубо с логико-философской точки зрения, позже - с позиций психологии, лингвистики и даже кибернетики. И если язык сегодня определяется как знаковая система, соотносящая понятийное содержание с некоторым его письменным/звучащим воплощением, то феномен сознания до сих пор не может считаться досконально изученным и описанным. Как сознание связано с физической реальностью? Какова его природа? На эти вопросы у сегодняшней науки нет окончательного ответа.

Впервые вышеозначенные проблемы сознания в более или менее явной форме были сформулированы Р. Декартом, позже получив освещение с разных точек зрения в многочисленных философских традициях. Так, например, немецкий философ Э. Гуссерль, основоположник феноменологии, определяет сознание как способность личности соотносить себя с внешним миром, а также как сам процесс, факт этого соотнесения (Гуссерль, 2009). Фундаментальная характеристика феноменологии - интенциональность сознания, несовпадение субъекта и объекта сознавания. Сознание - это всегда знание субъекта о чем-то, о некотором объекте.

Представители же аналитической философии, например, американцы Дж. Сёрл и Д. Чалмерс, подчеркивают необходимость осмысления феномена сознания не только с идеалистической, но и с натуралистической точки зрения. По мнению Чалмерса, т.н. “трудная проблема сознания” заключается как раз в различии между субъективным ментальным опытом и противопоставленным ему биохимическим процессам в мозгу, а также сущности их взаимосвязи, которая наукой еще не выявлена (Chalmers, 1995). Дж. Сёрл утверждает, что сознание представляет собой продукт мозговой активности, однако при этом оказывает обратное воздействие на мозговую активность (Сёрл, 2002).

В психологии “сознание” также является одним из основополагающих и трудноопределимых понятий. Согласно мнению советского ученого С.Л. Рубинштейна, “возникновение сознания связано с выделением из жизни и непосредственного переживания рефлексии на окружающий мир и на самого себя” (Рубинштейн, 1957: 260). Единицей сознательного действия является комплексный акт отражения объекта субъектом, включающий единство двух противоположных компонентов: знания (объективного, коллективного) и отношения, или же представления (субъективного, индивидуального). По А.Н. Леонтьеву, “сознание в своей непосредственности есть открывающаяся субъекту картина мира, в которую включен он сам, его действия и состояния” (Леонтьев, 1983: 166).

Но “отражение”, “открытие” картины мира есть не что иное, как его восприятие. Таким образом, с функциональной точки зрения можно понимать сознание как некоторую психическую структуру, отвечающую за восприятие и обработку всей информации, получаемой индивидом извне. Такова точка зрения швейцарского психиатра К.Г. Юнга, определяющего сознание как продукт восприятия и в целом ориентации во внешнем мире (Юнг, 1995). Важно понимать, что, по мнению Юнга, цельность психики не охватывается исключительно сознанием: и исторически, и индивидуально оно вышло, развилось из бессознательного, и это бессознательное начало в человеческой психике также активно функционирует.

Впрочем, для данного исследования первоочередное значение имеет структура сознания, и ее рассмотрение в последующих главах основывается именно на теории Юнга, поскольку она считается в той или иной степени классической. Современная аналитическая психология базируется на ключевых моментах данной теории о структуре психики.

Итак, какое же место в этой структуре занимает языковая система? За разъяснением этой стороны вопроса, очевидно, следует обратиться к трудам лингвистов, и в первую очередь - В. Гумбольдта, предпринявшего одну из первых попыток охарактеризовать связь языка и сознания. Его учение некоторым образом пересекается с рассмотренными ранее основополагающими философскими концепциями. Так, в статье “О мышлении и речи” Гумбольдт дает определение языка через феномен мышления: “Чувственное обозначение единств, с которыми связаны определенные фрагменты мышления для противопоставления их как частей другим частям большого целого, как объектов субъектам, называется в широчайшем смысле слова языком” (Гумбольдт, 1984: 301). Сущность мышления, по Гумбольдту, заключается в рефлексии, т.е. в различении мыслящего и предмета мысли. Очевидно, ученый не разграничивает феномены мышления и сознания, поскольку это определение, данное им в той же статье, практически не отличается от приведенных выше философских и психологических дефиниций сознания.

Е.Ф. Тарасов также дифференцирует сознание и языковое сознание, определяя последнее как “совокупность образов сознания, формируемых и овнешняемых с помощью языковых средств - слов, свободных и устойчивых словосочетаний, предложений, текстов и ассоциативных полей” (Тарасов, 2000: 26). Им же предлагается и другое, более “психологичное” определение: совокупность психических механизмов, обеспечивающих процесс речевой деятельности человека (Тарасов, 2000: 26).

По мнению Л.В. Щербы, языковое сознание “опредмечивается” в речевой деятельности, т.е. в процессах говорения, письма и понимания (Щерба, 1974: 25). Прежде всего следует отметить, что с точки зрения лингвистики, языковое сознание является частью речевой организации, которую можно противопоставить речевой деятельности как сущность явлению. В речевой организации человека, как правило, выделяются пять аспектов:

1) языковая способность как органическая возможность научиться вести речевое общение (физиологические, соматические, психические особенности),

2) коммуникативная потребность,

3) коммуникативная компетенция как выработанное умение осуществлять общение в его различных регистрах для оптимального достижения цели,

4) речевое поведение как осознанная и неосознанная система поступков, раскрывающих характер и образ жизни человека в процессе общения, например, частое использование определенных слов-маркеров, манера вести диалог, преобладание вопросительных или утвердительных предложений в повседневной речи и т.д.,

5) языковое сознание как вербальное “отражение во внутреннем мире внешнего мира” (Лурия, 1998: 24).

Если языковую способность и коммуникативную потребность можно назвать предпосылками к речевой деятельности, речевое поведение - как реализацию этой деятельности, а коммуникативную компетенцию - своеобразным механизмом ее реализации, то какую роль выполняет языковое сознание?

Очевидно, в нем объединены три различные сущности: сознание как психический феномен нематериальной природы и материальный феномен произносимой или записываемой речи, а также физиологический процесс формирования вербальных языковых связей. По мнению Ю.И. Алферовой, данный термин имеет двоякую сущность и включает в себя “динамическую форму -- выражение состояния сознания в вербальной форме, воздействие на сознание с помощью речи, -- а также структурную, образуемую языковыми структурами, формирующимися в результате ментального опыта субъекта, действия его сознания” (Алферова, 2005).

Итак, этот наиболее неоднозначный и абстрактный компонент речевой организации (и с другой стороны, как мы помним, - сознания как составляющей психики) включает в себя, по мнению В.В. Красных, такие структуры или ментальные образования, как знания и представления. Знания трактуются ученым как относительно стабильные, объективные и коллективные информационные единицы, а представления являют собой противоположность знаниям. Они лабильны, субъективны, индивидуальны и состоят не только из собственно представлений, образов и понятий, но и связанных с ними коннотаций и оценок. Обмен знаниями и представлениями в процессе говорения являет собой суть человеческой коммуникации. Таким образом, можно утверждать, что в процессе общения вступают во взаимодействие языковые сознания индивидов, осуществляя данное взаимодействие посредством речи. Это и есть суть “опредмечивание” сознания. Таким образом, в феномене языкового сознания лингвиста интересуют, в первую очередь, именно ментальные образования, выражаемые при помощи языковых знаков.

Проявление индивидуальности личности на том или ином языковом уровне позволяет отметить ее уникальные психологические качества и сделать вывод о принадлежности личности к тому или иному психотипу. С другой стороны, имеет значение и соотношение индивидуальных и стереотипных речевых образований в тексте, степень уникальности индивидуальных образований и высказываемых суждений. Наконец, использование индивидом тех или иных стереотипов и клише также указывает на определенные особенности мышления. Подводя итог вышесказанному, следует сказать, что единицы различных речевых уровней интересны в качестве объектов анализа, цель которого - выявление особенностей мышления и психики индивида в целом по характерным языковым и речевым признакам.

На основе представленных выше рассуждений можно сделать вывод, что корреляция между психологическими особенностями индивида и не отделимым от нее языковым сознанием безусловна. Выделение различных типов функционирования психики (далее “психотипов”) возможно не только на основе соответствующих качеств, изучаемых с психологической точки зрения, но и на основе языковых и речевых особенностей, которые сопровождают соответствующие психологические и социальные параметры личности.

С.А. Сухих отмечает, что важной задачей при изучении языкового сознания является “установление релевантных вербальных переменных, в которых опредмечивается содержание психики коммуниканта” (Сухих, 1997: 81), то есть, выделение тех самых языковых и речевых особенностей, наличие которых может говорить о том, что индивиду свойственны те или особенности психические. Выявление таких показательных вербальных структур возможно только эмпирическим путем.

С.А. Сухих в своей статье “Лингвопсихологические параметры языковой личности” (Сухих, 1997: 82) обобщает результаты, полученные путем разнообразных исследований разными учеными, и называет в качестве лингвистических коррелятов тема-рематическое членение предложений, использование конструкций активного и пассивного залога, предикативный и номинативный стиль изложения, абстрактность или конкретность лексических единиц, специфику метафорического переноса и т.д. На самом деле, говорить о сигнализирующих о каких-либо особенностях психики вербальных структурах следует в зависимости от специфики каждого конкретного текста.

Наконец, не стоит забывать о том, что как языковое, так и неязыковое сознание есть неотъемлемые характеристики личности, которая выступает их носителем. Соответственно, сначала следует обратиться к определению данного термина в различных научных областях гуманитарного знания. Итак, в философии под личностью понимается конкретный “человеческий индивид в аспекте его социальных качеств, формирующихся в процессе исторически конкретных видов деятельности и общественных отношений” (Философский энциклопедический словарь, 1989). Педагогика характеризует личность как человека, “рассматриваемого со стороны психолого-социальной сущности, для которого характерно развитие психики, способность к активному мышлению и усвоению социального опыта” (Подласый, 1996: 57). С точки зрения социологии, понятие личности включает в себя систему социально значимых черт, которые должны характеризовать индивида как члена общества. Наконец, психология определяет личность как некое “системное социальное качество, приобретаемое и характеризующее уровень и качество представленности общественных отношений в индивиде” (Петровский, 1976: 67).

Первое обращение к понятию именно языковой личности связано с именем немецкого ученого Й.Л. Вайсгербера в его работе “Die sprachliche Personlichkeit”. При этом в книге “Родной язык и формирование духа” он пишет, что “...язык представляет собой наиболее всеобщее культурное достояние. Никто не владеет языком лишь благодаря своей собственной языковой личности; наоборот, это языковое владение вырастает в нем на основе принадлежности к языковому сообществу” (Вайсгербер, 2004: 81). Таким образом, автор самого понятия противопоставляет языковое сообщество и отдельную языковую личность, тем самым подчеркивая индивидуальный характер языковой личности, ее соотносимость со специфическими психологическими, социальными и др. нелингвистическими характеристиками человека.

В 1980 году свою концепцию языковой личности предлагает в книге “Современная лингводидактика” Г.И. Богин. По его мнению, “языковая личность - тот, кто присваивает язык, то есть тот, для кого язык есть речь. Языковая личность характеризуется не столько тем, что она знает о языке, сколько тем, что она может с языком делать” (Богин, 1980: 3). В докторской диссертации Г.И. Богин дорабатывает и несколько видоизменяет высказанное ранее определение, представляя языковую личность как “человека, рассматриваемого с точки зрения его готовности производить речевые поступки, создавать и принимать произведения речи” (Богин, 1982: 4). Готовность к созданию речевых произведений и способность их создавать и воспринимать, безусловно, существует в тесной связи и причинно-следственных отношениях с процессом функционированием сознания.

Изучение языковой личности в отечественной лингвистике также связано с именем Ю.Н. Караулова, который понимает под языковой личностью совокупность способностей и характеристик человека, которые обуславливают создание им речевых произведений (Караулов, 2010: 12). Автор также отмечает, что понятие языковой личности включает в себя и психические, и социальные, и этические, и другие компоненты, но представленные через её язык и дискурс. Можно сделать вывод, что упомянутые в определении личностные факторы составляют речевую организацию и каким-то образом находят воплощение в речевой деятельности и речевых произведениях.

На основе представленных выше рассуждений можно сделать вывод о безусловной корреляции между психологическими особенностями индивида и его языковой личностью, а также неотделимым от нее сознанием, в т.ч., конечно, и языковым. Можно предположить, что выделение различных психологических типов личности (далее “психотипов”) возможно не только на основе соответствующих психологических черт, но и на основе языковых и речевых особенностей, которые сопровождают соответствующие психологические и социальные параметры личности.

Глава 2. Психологическая типология личности

2.1 Определение понятия “психотип”