Мультимодальный характер цифровой коммуникации: функционирование эмодзи в межличностном общении
Е.А. Кольцова, Ф.И. Карташкова
Аннотация
Технологические изменения и развитие цифровых средств коммуникации привели к формированию особой семиотики в цифровой сфере, отличающейся мультимодальным характером и включающим помимо прочего такие паралингвистические знаки как эмодзи, эмотиконы, мемы и др., которые выступают своего рода компенсаторным механизмом в новых реалиях коммуникативного взаимодействия. Повышенный интерес пользователей к различным иконическим знакам в цифровом общении вызывает значительный интерес исследователей самых разных областей научного знания. Цель исследования заключается в рассмотрении когнитивной, семиотической и психолингвистической природы эмодзи в рамках межличностного взаимодействия путем анализа их функционирования в текстах быстрых сообщений и постах в соцсетях, а также в попытке выявить механизмы их воздействия на адресата.
Материалом исследования послужили англоязычные, русскоязычные и франкоязычные поликодовые тексты быстрых сообщений в различных мессенджерах и в постах в сети Интернет, а также общедоступные публикации в социальных сетях и рассылки рекламного характера. Исследование проводилось с помощью методов контекстуального, лингво-прагматического и контент-анализа. В ходе исследования было установлено, что эмодзи в рамках межличностной коммуникации выполняют функции невербальной составляющей общения, эмотивную, прагматическую, пунктуационную, заместительную, декоративную и риторическую функции.
Данные символы, вводимые в контекст цифрового общения, служат помимо компенсаторного механизма и как средство воздействия на адресата, реципиента сообщения. Слияние вербальной и иконической составляющих запускает механизм двойного фокусирования, при котором восприятие обеспечивается всеми когнитивными механизмами, с подключением рациональной и эмоционально-бессознательной составляющих.
Ключевые слова: иконические знаки, эмодзи, цифровая семиотика, манипулятивные тактики, мультимодальная коммуникация, поликодовый текст, цифровая коммуникация
Abstract
Digital communication and multimodal features: functioning of emoji in interpersonal communication
Elena A. Koltsova, Faina I. Kartashkova
Technical advances and digital means of communication have led to the development of digital semiotics which is characterised by its multimodality and abounds in paralinguistic elements such as emojis, emoticons, memes, etc. These extralinguistic elements serve as a compensatory mechanism in the new communication means. The increasing interest of users in various iconic signs and symbols generates the research interest in different fields of knowledge. The study aims to consider cognitive, semiotic and psycholinguistic features of emojis in interpersonal communication through analysing their functions in text messages and in social network messages. An attempt to reveal their persuasive mechanism is made. The research is based on a large scale dataset comprised of the private text messages as well as public posts on social networks which include verbal and nonverbal / iconic elements. The research data presents a multilingual bank of English, Russian and French sources. The research methods include context analysis, linguistic and pragmatic analysis and content analysis. The findings show that emojis in private interpersonal communication perform a number of functions, namely nonverbal, emotive, pragmatic, punctuation, substitutional, decorative and rhetorical functions. These iconic symbols incorporated in the interpersonal digital communication present a compensatory mechanism and the means of persuasion of a message addressee / recipient. The combination of verbal and iconic elements triggers a double focusing mechanism, and the perception is shaped by all cognitive mechanisms including rational and emotional, unconscious components.
Key words: iconic symbols, emoji, digital semiotics, manipulative techniques, multimodal text, digital communication.
Введение
Технологический прорыв последних десятилетий быстро и кардинально изменил как мир вокруг нас, так и способы и характер нашего взаимодействия, создав новые беспрецедентные возможности и средства для коммуникации. Большая часть межличностного общения переместилась в область письменного общения в социальных сетях и мессенджерах, где помимо непосредственных собеседников к процессу коммуникации подключается своеобразный посредник в виде цифровых средств коммуникации. Разделяющий коммуникантов экран способен несколько менять иллокутивную силу речевого акта.
Данные изменения привели к формированию социальной семиотики в цифровой сфере (digital semiotics), отличающейся мультимодальным характером и включающей помимо прочего такие паралингвистические знаки, как эмодзи, эмотиконы, мемы и др., которые выступают своего рода компенсаторным механизмом в новых реалиях коммуникативного взаимодействия. Из всего перечисленного именно эмодзи продолжают оставаться в фокусе весьма пристального внимания исследователей самых разных областей знания: лингвистов, психологов, антропологов, культурологов, маркетологов, ученых в области семиотики и информационных технологий. При этом ученые полагают, что в силу своего прагматического значения данные парагра- фические знаки необходимо «понимать в лингвистических, а не экстралингви- стических терминах» [1. С. 250]. Цель данной статьи заключается в рассмотрении когнитивной, семиотической и психолингвистической природы эмодзи путем анализа их функционирования в текстах быстрых сообщений и постах в соцсетях, а также в попытке выявить механизмы их воздействия на адресата.
эмодзи когнитивный межличностный адресат
Определение понятия и обзор литературы
Прежде всего, определим исследуемое понятие «эмодзи». В переводе с японского языка, которому оно обязано своим появлением, эмодзи (emoji) обозначает `picture character', то есть является словом-картинкой, представляя собой изображение, визуализирующее разнообразные человеческие эмоции, невербальные действия человека, объекты, артефакты и т.д. Такой широкий спектр представления наряду со скоростью ввода, выразительностью и более глубоким уровнем идентификации, по нашему мнению, послужил залогом более успешного и широкого распространения эмодзи по сравнению с другими семиотическими параграфемными знаками, например, эмотиконами и мемами, что подтверждается статистическими данными целого ряда исследователей [2-6].
Внезапное появление и стремительное распространение эмодзи, по мнению известнейшего канадского специалиста в области семиотики Марселя Данези, может свидетельствовать о начавшейся эволюции самой системы человеческого общения [1]. Первый когнитивный сдвиг (first cognitive shift) произошел, по версии исследователей, приблизительно в 1000 до н.э. при переходе от пиктографического типа письма к логографическому, идеографическому или алфавитному письму [8]. Прослеживая эволюцию и функциональные особенности письменности, М. Данези высказывает предположение о том, что мы, возможно, стоим на пути второго когнитивного парадигматического сдвига, характеризующегося своеобразным «возвращением» пиктографического-логографического типа письма, соединенного с письмом алфавитным. Ученый называет его гибридным типом -- hybrid / blended writing system -- что, в свою очередь, может являться фактором значительного изменения человеческого сознания, переходом от линейного способа обработки информации к более целостному, образному способу мышления. Если эмодзи или подобные элементы коммуникации не окажутся преходящим трендом, то человечество может подойти ко второму когнитивному сдвигу в своей истории [1].
В зарубежной практике уже существует значительное количество разноаспектных исследований эмодзи, актуальность изучения которых продиктована в том числе и статистическими данными -- 92 % пользователей сети Интернет и различных мессенджеров используют эмодзи [9]. Количество исследовательских статей, посвященных изучению эмодзи, согласно анализу, проведенному группой ученых из Китайского народного университета в Пекине, начиная с 2015 г. увеличилось во много раз [3], особенный всплеск внимания к данному феномену наблюдается в последние три года. Исследования проводятся в основном в междисциплинарном русле, объединяя области компьютерных наук, рекламы и маркетинга, лингвистики, психологии, поведенческих наук, политологии, права, медицины и других. Ученые применяют эмпирический анализ данных, отмечая индивидуально-личностные [10; 11] и национально-специфичные, культурные [12-11] особенности использования эмодзи, гендерные сходства и различия [5; 18-20], а также специфику восприятия эмодзи пользователями, связанную с разными онлайн-платформами [6].
Аспекты функционирования эмодзи, визуальные особенности данных знаков, их выразительная модальность, отличная от текста и изображений, привлекают внимание различных исследователей. Изучение проводится с точки зрения их популярности и привлекательности для пользователей и соответствующей оптимизации компьютерных и нейронных систем [21; 22], а также для анализа данных пользовательского контента, разработки различных алгоритмов и моделей, позволяющих проводить более эффективный анализ тональности текста в социальных сетях [23], для определения настроения и эмоций пользователей в рекламных, маркетинговых [24; 25], политических [26] и иных целях. Контролирующая появление и использование новых эмодзи ассоциация Unicode постоянно отслеживает динамику использования тех или иных эмодзи для ввода новых единиц.
Эмодзи играют немаловажную роль в привлечении внимания в сфере маркетинга. Исследователи применяют различные лингвистические теории, преимущественно из области риторики, для изучения характера воздействия эмодзи на потребителя, стимулирования взаимодействия с потенциальным покупателем и повышения его заинтересованности в покупке. Доминирующая роль эмодзи в выражении эмоционального состояния в цифровой коммуникации делает их эффективным инструментом для отслеживания и измерения эмоций пользователя по отношению к продуктам, брендам и услугам [27-29].
В области поведенческих наук исследования эмодзи сосредоточены в основном на трех аспектах: мотивации использования данных знаков, предпочтениях в выборе тех или иных эмодзи и факторах, влияющих на этот выбор. Среди основных мотивирующих причин использования эмодзи называются управление и поддержание межличностных отношений [30], самовыражение [10], утверждение самоидентичности [11], облегчение межличностного общения [31]. Психологические исследования рассматривают взаимосвязь между индивидуальными психологическими характеристиками и использованием эмодзи, а также возможность внедрения их в психометрические шкалы в качестве новых инструментов психологического измерения [32]. Помимо этого существуют работы в области образования, изучающие влияние эмодзи на эффективность обучения, вовлеченность в учебный процесс и рефлексию [33].
Ряд семиотических исследований относится к правовой сфере, а именно разбору случаев судебных тяжб, в которых истинные интенции и мотивы обвиняемых трактовались через эмодзи, сопровождавшие их текстовые сообщения в социальных сетях и мессенджерах, адресованные жертвам или потерпевшим [7].
В рамках лингвистической науки исследования сосредоточены на прагматических функциях эмодзи [2; 34] и анализе потенциальной возможности того, что данные знаки и символы могут стать независимым универсальным языком в силу своих семантических свойств [23]. Проводится попытка выделения различных речевых актов в рамках межличностного общения через мессенджеры, в которых чаще всего встречаются эмодзи, преимущественно антропоморфные по своему визуальному представлению.
Основная отличительная особенность предпринятого нами исследования видится в обобщенном анализе роли эмодзи в цифровой коммуникации и попытке выявления воздействующего механизма данного феномена.
Методы и материал
Материалом исследования послужили англоязычные, русскоязычные и франкоязычные поликодовые тексты быстрых сообщений в различных мессенджерах и постах в сети Интернет, анализируемые с разрешения контактов автора исследования, а также общедоступные публикации в социальных сетях и персональные рассылки рекламного характера. Общий объем фактического материала составил 3500 единиц (сообщений, постов, рассылок). Исследование проводилось с помощью методов контекстуального, лингвопрагматического и контент-анализа.
Функции эмодзи в цифровой межличностной коммуникации
Широкое использование и растущая популярность эмодзи в цифровой коммуникации объясняется, на наш взгляд, теми психологическими и социальными функциями, которые они стали выполнять в коммуникации. Отметим при этом, что с развитием электронных технологий и расширением возрастных рамок участников электронного общения расширяются и меняются функции, выполняемые данными паралингвистиче- скими знаками [35].
С одной стороны, эмодзи является пиктографическим способом выражения умонастроения, помогая выражать эмоциональное состояние, эмпатию, «я» говорящего более эффективно в условиях электронной коммуникации, которую отличает ряд особенностей, в частности ограничения, связанные с невозможностью видеть собеседника. Эмодзи добавляют эмоции обычным текстовым сообщениям и в отличие от предшествовавших им эмотиконов позволяют передать целый спектр эмоций от простых улыбок или хмурого выражения лица до сарказма, удивления, возмущения и пр. Символ обладает довольно мощным коммуникативным потенциалом, способным эффективно передавать несоизмеримо большее содержание, нежели любой другой знак. При этом в пространстве Интернета эмодзи, благодаря своему универсальному характеру, способны преодолевать кросс-культурные границы и создавать диалоговое пространство среди носителей как одного языка, так и на межнациональном уровне.
Анализ фактического материала, определенный для исследования, позволил выделить ряд функций, выполняемых данными параграфемными знаками в цифровой коммуникации, а именно: функцию невербальной составляющей коммуникации, эмотивную, прагматическую, пунктуационную, заместительную, декоративную и риторическую.
Прежде всего, эмодзи выполняют невербальные коммуникативные функции. Неформальное письменное общение в сфере цифровой коммуникации представляет определенные сложности. Без дополнительной информации, передаваемой тоном голоса и языком тела при личном общении, пользователи социальных сетей и мессенджеров не всегда могут верно интерпретировать информацию, упуская из вида сарказм друг друга, юмор, и неверно истолковывают предполагаемую эмоцию или иллокутивное намерение. Подобно невербальным подсказкам при личном общении, эмодзи помогают прояснить намерения в неоднозначном контексте, выразить соответствующие ситуации эмоции и, следовательно, повысить эффективность коммуникативного акта. Примерами могут служить следующие примеры виртуальной коммуникации, где эмоциональная составляющая, передаваемая через паралингвисти- ческий семиотический знак, является определяющей для верной интерпретации высказывания (рис. 1):