Мультимодальный роман: опыт анализа

Размещено на http://www.allbest.ru

Мультимодальный роман: опыт анализа

Руденко Е.С.

Аннотация

Целью статьи является исследование функции мультимодальных компонентов в романе Ника Хорнби «Голая Джульетта».

Процедура и методы исследования. Методом сплошной выборки из романа были извлече-ны мультимодальные компоненты, далее были установлены их графические особенности и произведён их анализ в системе художественного целого. В ходе исследования применялись общие методы научного познания, основанные на анализе, синтезе и наблюдении, методы текстологического и контекстологического анализа. Для изучения семантики мультимодаль-ных компонентов использовался метод мультимодального анализа.

Результаты проведённого исследования. Автор приходит к выводу о том, что мультимодаль-ные компоненты выполняют важные текстообразующие функции, они обеспечивают темати-ческие связи между отдельными текстовыми массивами. Введение мультимодальных компонентов в орфографически нормативный текст несёт значительную прагматическую нагрузку, заключённую в усилении эмоционально-эстетического воздействия на адресата и создании эффекта подлинности.

Теоретическая и практическая значимость состоит в дальнейшей теоретической разработке мультимодального анализа как эффективного инструмента интерпретации текста и в возможности использования результатов исследования в практической деятельности лингвиста при анализе структуры художественных произведений.

Ключевые слова: мультимодальность, семиотическая система, художественный текст, интер-претация текста.

Abstract

Multimodal novel: analysis

E. Rudenko

Purpose is to study the functions performed by multimodal components in Nick Hornby's novel “Juliet, Naked”.

Methodology and Approach. Using continuous sampling method the author extracted multimodal components from the novel, identified their graphic design characteristics and analyzed them within the text as a coherent whole. This has been achieved by means of general methods of scientific knowledge (observation, analysis and synthesis), textual and contextual analysis. The method of multimodal analysis has been applied to analyze the meanings of multimodal components.

Results. The author concludes that multimodal components perform significant text-organizing functions; they ensure thematic coherence between separate text segments. The integration of multimodal components into the orthographically standardized text is pragmatically functional; it heightens the emotional and aesthetic impact on the recipient and creates the effect of authenticity.

Theoretical and Practical implications lie in the further development of multimodal analysis as an effective text-interpretation tool and in using the study results in practical linguistic activities when analyzing fiction text structures.

Keywords: multimodality, semiotic system, work of fiction, interpretation of the text.

Идея диалогичности текста, его обра-щённости к другим текстам, высказанная М. М. Бахтиным, стала основой даль-нейшего расширения понятия «текст». Опираясь на идеи М. М. Бахтина, Р. Барт выдвигает положение о том, что интер-текстуальность является условием суще-ствования любого текста: «Каждый текст является интертекстом; другие тексты присутствуют в нём на различных уров-нях в более или менее узнаваемых фор-мах: тексты предшествующей культуры и тексты окружающей культуры. Каждый текст представляет собой новую ткань, сотканную из старых цитат» [1, с. 419]. Наиболее разработанными в практике анализа художественного произведения формами интертекстуальности являются аллюзии, реминисценции, цитаты, вари-ативные разновидности «чужого слова». В интертексте связи выстраиваются вну-три единого семиотического кода.

Организация текста посредством взаимодействия разных семиотических рядов получила название «интермеди- альность». Интермедиальность подраз-умевает взаимопроникновение «языков различных видов искусства в системе единого художественного целого» [7, с. 4]. В системе интермедиальных отношений осуществляется перевод единиц невер-бальной семиотической системы (произ-ведения живописи, архитектуры, музы-ки, декоративно-прикладного искусства) в вербальную с последующим взаимодей-ствием на смысловом уровне [7, с. 4].

Современные цифровые технологии значительно преобразили и усложнили понятие «текст». Взаимодействие семи-отического пространства интернета и семиотически инородного пространства печатного текста приводит к появлению принципиально новых нарративных форм, так называемых мультимодальных романов. В теории мультимодальности, сформулированной в работах Г. Кресса и Т. ван Леувена [11; 12], модусы определя-ются как социально сформированные и культурно обусловленные семиотические ресурсы, используемые для порождения смыслов в тексте [10, p. 54]. В. Галлет, го-воря о мультимодальном романе, отмеча-ет, что он возникает в результате систе-матически повторяющегося внедрения в ткань текста различных модусов: “... it is the systematic and recurrent integration of non-verbal and non-narrative elements in novelistic narration” [13, p. 130]. Невер-бальные и ненарративные элементы в нарративном дискурсе могут включать в себя фотографии, все варианты графи-ческих репрезентаций, текстовые вклю-чения, выполненные различными шриф-тами, репродукции печатных текстов из других источников, невербальные типы символизации, различные дискурсивные модусы (стенограммы ненарративных бесед, телефонных разговоров). В отече-ственных исследованиях для обозначе-ния текстов, в которых интегрированы в единое смысловое и структурное целое вербальные и невербальные компонен-ты, используется синонимичный термин «креолизованный текст», впервые приме-нённый Ю. А. Сорокиным и Е. Ф. Тарасо-вым [6].

Таким образом, интермедиальность ак-центирует трансформацию единиц иной семиотической системы, а мультимодаль-ность - интеграцию соответствующих единиц в пространство художественного текста, что предполагает сохранение эти-ми единицами черт иной семиотической природы. Мультимодальность привносит в текст визуальную активность, переносит центр тяжести с изолированного текста как средства коммуникации на образ. Ав-торы современных исследований рассма-тривают функционирование мультимо-дальных текстов в рамках политического [2; 4], рекламного [8], образовательного [3; 9; 14] и интернет-дискурсов [5], в которых для реализации коммуникативных функ-ций текста активно используются визу-альные образы.

Художественный текст в этом отно-шении не является естественной средой бытования мультимодальности. Появле-ние мультимодальных романов ломает традиционный повествовательный стиль и ставит вопрос о необходимости изуче-ния подобных форм текстовой гетероген-ности, этим объясняется особая актуаль-ность данного вопроса.

Объектом настоящего исследования является художественное целое романа Ника Хорнби «Голая Джульетта». Предме-том настоящего исследования являются мультимодальные средства, отсылающие к электронным формам существования текста и рассматриваемые в рамках тео-рии мультимодальности. Целью работы выступает выявление функций мульти-модальных средств в художественном тексте. Для достижения поставленной цели решаются следующие задачи:

1) выявление мультимодальных ком-понентов;

2) установление особенностей графи-ческого оформления данных компонентов;

3) анализ данных компонентов в си-стеме художественного целого.

В ходе исследования применялись общие методы научного познания (на-блюдение, анализ, синтез), методы тек-стологического и контекстологического анализа. Для изучения семантики муль-тимодальных компонентов использо-вался метод мультимодального анализа, учитывающий смысл визуального образа и смысл, возникающий при взаимодей-ствии двух семиотических ресурсов (вер-бального и невербального).

В романе современного британского писателя Ника Хорнби «Голая Джульет-та» рассказывается о вымышленном рок- исполнителе 80-х гг. Такере Кроу, который исчезает из поля зрения своих кумиров после выхода альбома «Джульетта». По-сле двадцати лет молчания выходит де-мо-версия альбома, что вызывает новую волну интереса в интернет-сообществе, иронично именуемом «большой интер- нет-семьёй» (extended internet famil).

Открывшиеся в цифровую эпоху воз-можности электронной коммуникации и межличностной кооперации играют роль главного тематического стержня текста. В ходе развёртывания романа в текст ин-корпорируются мультимодальные ком-поненты, существующие в интернет-про- странстве, а именно:

1) веб-страницы Википедии, кото-рые содержат статьи о творчестве Такера Кроу и его альбоме «Джульетта»;

2) электронные письма;

3) дискуссии на форуме веб-сайта, посвящённого творчеству Такера Кроу.

Веб-страницы Википедии, интери- оризируясь, сохраняют в пространстве печатного текста черты, присущие раз-мещению информации в виртуальном пространстве. Они оформляются в виде обособленного текстового включения на отдельном развороте, не сливаются с ос-новным текстом романа, воспроизводя образ веб-страницы (см. рис. 1).

Композиционно-графическое оформ-ление материала находится в соответ-ствии с традиционным оформлением страниц в Википедии: присутствуют за-головок статьи, определяющее слово в скобках (Juliet (album)), отсутствует от-ступ первой строки абзаца (красная стро-ка), деление на абзацы обеспечивается посредством междустрочного интервала. Статья написана в энциклопедическом стиле (чётко, ясно и сжато), который кон-трастирует с индивидуальным стилем писателя. Такое смысловое переключение из одного смыслового ряда в другой пре-одолевает замкнутость и ограниченность нарративного текста, обостряет читательское внимание.

Рис. 1. Веб-страница Википедии, посвящённая альбому «Джульетта».

Fig. 1. Wikipedia web page on the album “Juliet”.

Визуальное подобие между «печатной» версией Википедии и её интернет-версией усиливает ощу-щение подлинности, соприкосновения с историей реальных людей. Следующим типом мультимодальных компонентов, представленных в романе, являются электронные письма. Два ко-ротких электронных письма приводятся в виде цитаты, не нарушающей графи-ческой ткани текста: “This time, however, there were two e-mails, from someone called Alfred Mantalini. The first was titled “Your Review”. It was very short. It said, simply, “Thank you for your kind and perceptive words. I really appreciated them. Best wishes, Tucker Crowe”. The title on the second was “P.

S.”, and the message said, “I don't know if you hang out with anyone on that website, but they seem like pretty weird people, and I'd be really grateful if you didn't pass on this address.”¹ Приведённый текстовый фрагмент инте-ресен в отношении электронного адреса отправителя. Такер Кроу, регистрируя свой почтовый ящик, использует псев-доним «Альфред Манталини». Альфред Манталини - персонаж романа Чарльза Диккенса «Жизнь и приключения Ни-коласа Никльби», образ которого далёк от совершенства: “Alfred Mantalini was a character in Nicholas Nickleby, apparently, an idler and philanderer who ends up bankrupting his wife.” Подобная форма са- мопрезентации в интернет-среде свиде-тельствует об ироничной самооценке от-правителя и вырабатывает определённое отношение к нему. Ник Хорнби избегает таким образом прямой характеристики героя, используя «говорящий» электрон-ный адрес как художественный приём. На страницах романа приводятся так-же развёрнутые варианты электронных писем, печатная форма которых сохраня-ет структуру, присущую традиционным электронным посланиям: электронное письмо имеет поле для информации, куда вносятся адрес получателя и тема пись-ма, и поле для текста письма (см. рис. 2). В качестве завершающей письмо фразы используется заключительная формула прощания (With best wishes) (см. рис. 3).

Рис. 2. Электронное письмо Такера Кроу (начало) Fig. 2. Email by Tucker Crowe (the beginning)

семиотический текст научный

Рис. 3. Электронное письмо Такера Кроу (конец)

Fig. 3. Email by Tucker Crow (the end)

Тело электронного письма по своим графическим признакам отличается от основного текста романа и отделяется от него междустрочным интервалом. Структурное подобие отображения вир-туальной реальности создаёт иллюзию отсылки к реально существующим пер-сонажам. Включение электронных писем в роман открывает перед его автором возможность произвести на читателя больший эмоционально-эстетический эффект, дать ему почувствовать досто-верность происходящих событий.

Пространство электронного письма становится также пространством словес-но-графической игры, которая, оставаясь в непреложных рамках заданной формы, по-своему интерпретирует её:

From: Annie Platt <annieannienduncan. net

Subject: Beyond Reasonable Doubt ...

... It's you. I read enough fiction to know it's detail that makes a story seem real, and anyone who has gone to all the trouble of ma-king that lot up deserves a reply anyway.

В приведённом примере тело письма является продолжением заголовка, они образуют единое смысловое целое (Beyond Reasonable Doubt It's you. - «Вне вся-кого разумного сомнения Это вы»),

что не соответствует правилам оформле-ния текстов подобного рода.

Текст электронного письма иногда перемежается рефлексиями персона-жей, благодаря чему возникает эффект отстранения, позволяющий осмыслить содержательное наполнение текста и за-тронуть, в частности, некоторые особен-ности электронной коммуникации, всту-пающие в противоречие с реальностью неоцифрованного мира:

She stopped typing. If she'd been using pen and paper, she would have screwed the paper up in disgust, but there wasn't a satisfying equivalent with e-mail, seeing as everything was designed to stop you making a mistake. She needed a fuck-it key, something that made a sat-isfying ka-boom noise when you thumped it¹.

Она оторвалась от письма. Сиди она сейчас с пером перед листом бумаги, быть её писанине исчёрканной и искарябанной вдоль и поперёк, а то и полетел бы лист в мусорную корзину. Но электроника поза-ботилась о бескровном исправлении напи-санного и о безмусорном его уничтожении. Ошибся - исправляй на здоровье! Вот бы ещё клавишу «ко всем чертям» добавить в клавиатуру, чтобы как следует грохо-тала при нажатии.

Кроме того, такие отступления демон-стрируют дискретности в процессе по-рождения текста, а также дают читателю возможность сопережить этапы его кор-рекции и редактирования, что усиливает эффект вовлечённости и создаёт эффект «двоемирия» (реальный мир / виртуаль-ный мир).

В тексте романа фигурирует ещё один тип мультимодальных компонентов - фанатский форум, посвящённый жизни и творчеству Такера Кроу. Часть сообще-ний на форуме вводится в повествование как прямые цитации, на их «виртуаль-ное происхождение» указывают осо-бые графические вербальные средства, свойственные интернет-коммуникации: так называемая облегчённость - почти полное отсутствие знаков препинания, использование заглавных букв для при-дания эмоциональной насыщенности вы-сказываниям: “Tucker Crowe is FINISHED get over it you people are pathetic just going on and on about a singer who hasn't made an album for twenty years. He was overrated then and he's overrated now and Morrissey is so much better its embarrassing”.

Форум как фрагмент виртуальной реальности появляется в конце романа - вместо эпилога, в нём разноголосый хор участников даёт оценку недавно вышед-шего альбома Такера Кроу «Голая Джу-льетта». Зрительный эффект достоверно-сти и искренности языкового материала так же, как и в предыдущих случаях, ос-нован на воспроизведении формальных композиционно-графических структур интернет-модуса в книжном модусе: при-сутствуют тема обсуждения (парафраз строки из песни Такера Кроу; “Throwing stones at the window / ,Til he came to the door / So where were you, Mrs. Steven Balfour?”), количество сообщений (публичных по-стов), опубликованных на форуме, имя пользователя, ниже представлены ответы и комментарии по данной теме (рис. 4).

Рис. 4. Фанатский форум, посвящённый Такеру Кроу. Fan forum dedicated to Tucker Crowe

Fig. 4. Fan forum on Tucker Crowe

Представляется интересным отметить тот факт, что на 2019 г. самыми популяр-ными площадками являются соцсети Facebook (среди британских пользовате-лей) и ВКонтакте (среди российских поль-зователей), поэтому типовая модель форума, показанная на страницах опу-бликованного в 2009 г. романа, может рас-сматриваться как своеобразный документ эпохи, в которой происходит быстрая сме-на предпочтений в медиапространстве.

Не менее интересен для анализа такой аспект бытования музыки в романе, как описание / создание музыки средствами знаковой системы языка. Это осущест-вляется, в частности, посредством рефе-ренциальных отсылок к музыкальным и литературным источникам, оказавшим плодотворное влияние на альбом «Джу-льетта» Такера Кроу (Influenced both by other North American songwriters such as Bob Dylan, Bruce Springsteen and Leonard Cohen, and by the guitarist Tom Verlaine¹), а также посредством описания акустиче-ских особенностей отдельных музыкаль-ных композиций (the guitarist's incendiary solo on “You and Your Perfect Life”.; Annie loved “You and Your Perfect Life”. She loved its relentless anger ... She didn't usually like howling guitar solos, but she liked the way that the howling guitar solo in “Perfect Life” seemed just as articulate and as angry as the lyrics). Опираясь на эту культурную информацию, нью-йоркский компози-тор и аранжировщик Перри Серпа за-писал реальный альбом “Wherefore Art Thou?”, вдохновлённый вымышленным альбомом Такера Кроу «Джульетта». Эта «экстериоризация» музыки, её перевод в сферу иной знаковой системы свиде-тельствует в пользу идеи полифонии, открытости текста, который в рамках со-временной культуры приобретает новые мультимодальные измерения.

Проанализированные примеры по-казывают, что в пространстве текста мультимодальные компоненты (веб-страницы Википедии, электронные письма, дискуссии на форуме веб-сайта) выполняют важные текстообразующие функции. Во-первых, они расширяют со-держательное пространство текста, пре-одолевая ограниченность вербальных компонентов. Во-вторых, они структури-руют пространство текста, обеспечивая тематические связи между отдельными текстовыми массивами. Сам интернет- модус как социально-культурный фе-номен становится в романе предметом обсуждения, осмысления тех изменений, которые произошли в коммуникации: ““Why bother” was never a question you could ask about more or less anything on the Inter-net, otherwise the whole bunch of them shriv-eled to a cotton-candy nothing”4. В-третьих, введение мультимодальных компонентов в орфографически нормативный текст приобретает прагматическое значение: усиление эмоционально-эстетического воздействия на адресата и создание эф-фекта подлинности и достоверности.

Литература

1. Барт Р. Избранные работы. Семиотика. Поэтика. М.: Прогресс, 1989. 616 с.

2. Ворошилова М. Б. Политический креолизованный текст: ключи к прочтению: монография. Екатеринбург: Урал. гос. пед. ун-т, 2013. 194 с.

3. Глебова Л. Н., Платонова Ю. А. Мультимодальный образовательный текст массовых открытых онлайнкурсов (МООК): рекомендации по визуализации контента // Научный диалог. 2016. № 10 (58). С. 338-350.

4. Детинко Ю. И., Куликова Л. В. Политическая коммуникация: опыт мультимодального и крити-ческого дискурс-анализа: монография. Красноярск: СФУ, 2017. 168 с.

5. Левченко М. Н., Изгаршева А. В. Креолизованный текст в системе «Интернет» // Вестник Мо-сковского государственного областного университета (электронный журнал). 2018. № 4. URL: www.evestnik-mgou.ru (дата обращения: 10.О8.2О19).

6. Сорокин Ю. А., Тарасов Е. Ф. Креолизованные тексты и их коммуникативная функция // Оп-тимизация речевого воздействия. М.: Высшая школа, 1990. С. 178-187.

7. Тишунина Н. В. Западноевропейский символизм и проблема взаимодействия искусств: опыт интермедиального анализа. СПб.: РГПУ им. А. И. Герцена, 1998. 159 с.

8. Тумский С. В. Концептуальное картирование эксплицитных и имплицитных средств воздей-ствия в рекламном тексте: на материале англоязычной мультимодальной печатной рекламы: автореф. дисс. ... канд. филол. наук. М., 2015. 23 с.

9. Bull G., Anstey M. Elaborating Multiliteracies through Multimodal Texts: Changing Classroom Prac-tices and Developing Teacher Pedagogies. London, New York: Routledge, 2019. 328 p.

10. Kress G. What is mode? // The Routledge Handbook of Multimodal Analysis. New York: Routledge, 2009. P 54-67.

11. Kress G., Leeuwen T van. Reading Images: The Grammar of Visual Design. London: Routledge, 2006. 312 p.

12. Kress G., Leeuwen T van. Multimodal discourse: The modes and media of contemporary communica-tion. London: Arnold, 2001. 152 p.

13. Hallet W The multimodal novel: The integration of modes and media in novelistic narration // Nar- ratology in the age of cross-disciplinary narrative research. New York: De Gruyter, 2009. P. 129-153.

14. Svдrdemo-Еberg E., Ekerfeldt A. Design and recognition of multimodal texts: selection of digital tools and modes on the basis of social and material premises? // Journal of Computers in Education. 2017. Vol. 4. Iss. 3. P. 283-306.

References

1. Bart R. Izbrannye raboty. Semiotika. Poetika [Selected works. Semiotics. Poetics]. Moscow, Progress Publ., 1989. 616 p.

2. Voroshilova M. B. Politicheskii kreolizovannyi tekst: klyuchi k prochteniyu [Political creolized text: keys to reading]. Yekaterinburg, Ural State Pedagogical University Publ., 2013. 194 p.

3. Glebova L. N., Platonova Yu. A. [Multimodal Educational Text of Mass Open Online Courses (MOOC): Recommendations for Content Visualization]. In: Nauchnyi dialog [Scientific Dialogue], 2016, no. 10 (58), pp. 338-350.

4. Detinko Yu. I., Kulikova L. V Politicheskaya kommunikatsiya: opyt mul`timodal`nogo i kriticheskogo diskurs-analiza [Political communication: the experience of multimodal and critical discourse analy-sis]. Krasnoyarsk, Siberian Federal University Publ., 2017. 168 p.

5. Levchenko M. N., Izgarsheva A. V. [Creolized text in the Internet-system]. In: Vestnik Moskovskogo gosudarstvennogo oblastnogo universiteta (elektronnyi zhurnal) [Bulletin of Moscow Region State Uni-versity (e-journal)], 2018, no. 4. Available at: www.evestnik-mgou.ru (accessed: 10.08.2019).

6. Sorokin Yu. A., Tarasov E. F. [Creolized texts and their communicative function]. In: Optimizatsiya rechevogo vozdeistviya [Optimization of speech influence]. Moscow, Vysshaya shkola Publ., 1990, pp. 178-187.

7. Tishunina N. V. Zapadnoevropeiskii simvolizm i problema vzaimodeistviya iskusstv: opyt intermediaknogo analiza [Western European Symbolism and the Problem of the Interaction of Arts: An Intermediate Analysis Experience]. St. Petersburg, Herzen State Pedagogical University of Russia Publ., 1998. 159 p.

8. Tumsky S. V. Kontseptuaknoe kartirovanie eksplitsitnykh i implitsitnykh sredstv vozdeistviya v reklam- nom tekste: na materiale angloyazychnoi muktimodaknoipechatnoi reklamy: avtoref. diss. ... kand. filol. nauk [Conceptual mapping of explicit and implicit means of influence in the advertising text in Eng-lish multimodal print advertising: abstract of PhD thesis in Philological Sciences]. Moscow, 2015. 23 p.

9. Bull G., Anstey M. Elaborating Multiliteracies through Multimodal Texts: Changing Classroom Prac-tices and Developing Teacher Pedagogies. London, New York, Routledge, 2019. 328 p.

10. Kress G. What is mode? In: The Routledge Handbook of Multimodal Analysis. New York, Routledge, 2009. pp. 54-67.

11. Kress G., Leeuwen T. van. Reading Images: The Grammar of Visual Design. London, Routledge, 2006. 312 p.

12. Kress G., Leeuwen T van. Multimodal discourse: The modes and media of contemporary communica-tion. London, Arnold, 2001. 152 p.

13. Hallet W The multimodal novel: The integration of modes and media in novelistic narration. In: Nar- ratology in the age of cross-disciplinary narrative research. New York, De Gruyter Publ., 2009. pp. 129-153.

Размещено на Allbest