Слух как интерфейс: исследование звука в компьютерных играх
Рубрикатор
1. Введение 2. Теоретическая рамка 3. Звук как способ навигации в играх 4. Сравнение теоретических подходов изучения звука 5. Выводы
1. Введение
Компьютерные игры всё чаще рассматриваются исследователями не только как визуальные медиа, но как звуковые среды, внутри которых разворачиваются собственные формы восприятия, ориентации и действия.
Игровой звук — это динамическое, интерактивное пространство, рождаемое на стыке алгоритмов, игровой среды и слушателя. Задача исследования — показать, как работает звуковое мышление в рамках игрового опыта, какие техники лежат в его основе и почему игры стали идеальной площадкой для современного саунд-арта.
2. Теоретическая рамка
Процедурный звук — фундаментальный сдвиг в понимании того, что такое «звук» в цифровой среде. Он отражает идею, что акустическое явление не обязано иметь физическую причину; оно может быть порождено числом, алгоритмом, моделью, состоящей из логики, параметров и вероятностей.
пример аудио-системы в Unreal engine
Звук как объект, процесс и поле (Шеффер, Кокс, Боннэ)
Эта идея в корне меняет привычные онтологии звука, описанные в ранних исследованиях. Шеффер мыслит звук как объект, Кокс — как поток, Боннэ — как поле интенсивностей. В игре все три модели одновременно верны, потому что звук в играх:
- и объект (обособленная логическая сущность в аудиодвижке), - и поток (постоянный пересчёт DSP-параметров), - и поле (экологическая акустическая среда).
Многие звуковые события не существуют до тех пор, пока игрок не вступит с ними в взаимодействие — например, пока не войдёт в определённую область пространства или не вызовет физическое событие (выстрел, столкновение, шаг).
Пока игрок не нажмёт кнопку выстрела, звук выстрела не прозвучит.
Нелинейные звуковые события
Процедурный звук можно рассматривать как механизм самоорганизации среды. Алгоритм в реальном времени управляет параметрами звука: уровнем громкости, АЧХ, направленностью, наличием пространства, обработками.
Это принципиально отличает игровой звук от кино, где каждая звуковая дорожка фиксирована. В играх звук непрерывно пересчитывается в зависимости от действий игрового мира, игрока, физики и состояния окружения.
Здесь и рождается технопоэтика — звуковой смысл возникает не из художественного намерения автора, а из логики системы. Звучать может сама структура мира.
Пример линейного звука из кино (программа Reaper).
Пример нелинейного звука из игры (программа Unreal Engine).
Экологическая модель звукового ландшафта (Краусе)
Игровые миры нередко строятся по принципам биофонии, геофонии и антропофонии, описанных Берни Краусе. Это позволяет рассматривать игру с точки зрения цифрового звукоприродного ландшафта.
Комбинируя эти подходы, мы можем описать игровое звуковое мышление как техноэкологический процесс, где алгоритм является медиатором между слушателем и акустической средой.
В игре звучит одновременно и птицы, и дуновение ветра, и озвучка игрового персонажа игрока (Arc raiders).
Возможные принципы процедурного звука:
- granular synthesis для ветра, дождя, материалов; - генерация шагов на основе физики поверхности; - параметрическая фильтрация (например, эффект окклюзии за стеной); - динамическая реверберация, зависящая от размеров помещения; - генерация биофонии (циклы, паттерны, рандомизация).
Гранулярный синтезатор дождя (The Rain).
Динамически настраиваемая реверберация в аудиодвижке FMOD.
3. Звук как способ навигации в играх
Игровой звук — это не украшение и не элемент атмосферы. Одна из его важнейших задач — навигация, причём не визуальная, а сенсомоторная. Игрок ориентируется в пространстве через слух, даже не осознавая этого — как через систему эхолокации.
Зависимость АЧХ звуков природы от времени суток в игре
Хорогеография — организация движения через звук
Термин «хорогеография» в контексте звука обозначает структурирование пространства через распределение акустических событий.
Игровая хорогеография включает:
- звуковые тропы — пути, по которым игрок «ведёт себя правильно»; - акустические границы — области опасности, где частоты и громкость меняют поведение; - звуковые тени — зоны, где звук исчезает или приглушается (например, здания в гонках); - акустические ориентиры — маяки, по которым игрок определяет направление.
Need for speed (2015)
Например:
в The Legend of Zelda: Breath of the Wild направление ветра — это географический показатель для планирования маршрута;
в Dark Souls звук огромных врагов слышен раньше, чем они появляются в поле зрения — это чистое звуковое предвосхищение;
Alien: Isolation использует фазовый сдвиг шума вентиляции как подсказку: Ксеноморф находится поблизости.
Alien: Isolation (2014)
Игровой звук как аудио-UI
Современные игры дают очень высокую нагрузку на глаза, игроку нужно непрерывно следить за множеством игровых сущностей одновременно.
Из-за этого разработчики стараются переводить как можно больше визуального интерфейса в аудио-сигналы, например:
- предупреждения об опасности (Hunt: Showdown); - дыхание персонажа (критическое здоровье); - изменение спектра звука турбонагнетателя машины (Forza Horizon).
Forza Horizon (2021)
Таким образом, слух выполняет функцию интерфейса. Игрок не читает данные — он ощущает их через слух.
Это соответствует концепции Оливерос о глубоких формах слушания: игрок буквально входит в «расширенное внимание», которое становится основой игрового поведения.
Визуальное отображение адуио-маркеров (Pubg, 2017)
4. Сравнение теоретических подходов изучения звука
Теория звуковых исследований предсказала эстетические и технологические процессы в играх.
Исследования звука XX века — от musique concrète до акустической экологии — сформулировали представления о природе звука, которые на момент их появления выглядели скорее философскими или экспериментальными. Однако именно в индустрии компьютерных игр эти идеи получили неожиданно точное, техническое и массовое воплощение.
Во многом это связано с тем, что игры — не «медиа воспроизведения», а медиа синтеза: в них звук не проигрывается, а создаётся. Это делает игровую среду идеальным пространством для реализации тех принципов, которые долгое время существовали лишь в виде теорий или лабораторных художественных проектов.
Шеффер и редукция звука до «объекта»
Шефферовская идея «звукового объекта» воплощается в Wwise и FMOD — каждый звук существует как атомарная сущность с различными параметрами: высота звука, громкость, огибающие, окклюзии, фильтрации, аттенюации и т. д.
Но при этом игры преодолевают ограниченность шефферовской модели, поскольку звук перестаёт быть изолированным объектом — он включён в систему параметров и событий.
Пример воспроизведения аудиосистем в аудиодвижке Wwise.
Шион: аудиовизуальные режимы восприятия
Шион выделял режимы: клиповый (саундтрек), синхронизированный, познавательный.
В играх музыка становится полностью динамической (режим меняется по состоянию игрока). Синхресис усиливается, потому что звук часто формирует действие прежде изображения; Познавательный режим доминирует — звук является способом эпистемологии мира.
Например, Hellblade радикально демонстрирует возможность «несколько субъектов слуха» внутри одного персонажа.
Hellblade: Senua’s Sacrifice (2017)
Кокс и звук как онтология процесса
Кокс утверждает, что звук — это «материализация становления». Игры буквально демонстрируют это. Звук существует не как запись, а как процесс, зависящий от множества факторов: физики мира, поведения игрока, взаимодействия игровых систем.
Музыка в Inside возникает как следствие движения через пространство; биофония в Horizon Zero Dawn — как результат поведения машин.
Inside (2016)
Труакс и экология звукосфер
Игры типа The Long Dark, Firewatch, Death Stranding применяют модели акустической экологии:
- биофония задаёт ритм места (птицы, стрекот, волки), - геофония показывает состояние среды (ветер, дождь, камни, снег), - антропофония озвучивает всё что относится к «вмешательству» человека в мир игры.
Это соответствует идее «акустической коммуникации»: игрок понимает, что происходит, по изменению общей аудиосферы, а не по конкретным объектам.
Firewatch (2016)
5. Выводы
Компьютерная игра — это не визуальное искусство со звуком, а синергия визуального, звукового, геймплейного и мета-искусства.
Современные игровые движки используют звук в совершенно разных качествах, таких как:
- инструмент познания; - основу пространственной ориентации; - элемент повествования; - часть структуры эмоционального опыта; - медиацию между человеком и алгоритмом.
Именно поэтому игры — это уникальная площадка для sound studies. Они создают ситуации, где слушатель вынужден мыслить звуком, а не лишь воспринимать его.
Боннэ, Ф. Порядок звуков. Звучащий архипелаг / F. J. Bonnet. — Urbanomic, 2016.
Кокс, К. Звуковой поток. Звук, искусство и метафизика / К. Кокс; пер. с англ. — Москва: Новое литературное обозрение, 2022.
Шеффер, П. Трактат о музыкальных объектах / P. Schaeffer. — Berkeley: University of California Press, 1966 (репринт 2017).
Шион, М. Звук: слушать, слышать, наблюдать / М. Шион. — Москва: Ад Маргинем Пресс, 2020.
Herzogenrath, B. Sonic Thinking. A Media Philosophical Approach / B. Herzogenrath. — London: Bloomsbury Academic, 2017.
Truax, B. Acoustic Communication / B. Truax. — Norwood: Ablex Publishing Corporation, 1984.
Truax, B. Soundscape, Acoustic Communication and Environmental Sound Composition // Contemporary Music Review. — 1996. — Vol. 15, № 1.
Oliveros, P. Deep Listening: A Composer’s Sound Practice / P. Oliveros. — Kingston: Deep Listening Publications, 2005.
LaBelle, B. Background Noise. Perspectives on Sound Art / B. LaBelle. — London: Bloomsbury Academic, 2015.
Gottschalk, J. Experimental Music Since 1970 / J. Gottschalk. — London: Bloomsbury Academic, 2016.
Deleuze, G. Vincennes Seminar Session: On Music // Discourse. — 1998. — Vol. 20, № 3.
Cutler, C. Technology, Politics and Contemporary Music: Necessity and Choice in Musical Forms // Popular Music. — 1984. — Vol. 4.
Ferrari, L. Presque Rien. Notes et fragments / L. Ferrari. — Maison ONA, 1970.
Cobussen, M. Engaging with Everyday Sounds / M. Cobussen. — Cambridge: Open Book Publishers, 2022.
Schaeffer, P., Warner, D. (eds.). Audio Culture: Readings in Modern Music. — London: Bloomsbury Academic, 2017.
Bull, M., Cobussen, M. (eds.). The Bloomsbury Handbook of Sonic Methodologies. — London: Bloomsbury Academic, 2021.
Farina, A., Gage, S. Ecoacoustics: The Ecological Role of Sounds / A. Farina, S. Gage. — Hoboken: Wiley, 2017.
Krause, B. The Niche Hypothesis: How Animals Taught Us to Dance and Sing / B. Krause. — 1987.
Sacks, O. Musicophilia / O. Sacks. — New York: Alfred A. Knopf, 2007.
Вестеркамп, Х. Soundwalking. — Vancouver: World Soundscape Project, 1974.
Hellblade: Senua’s Sacrifice [Ninja Theory] — 2017.
The Last of Us Part I–II [Naughty Dog] — 2013–2020.
Death Stranding [Kojima Productions] — 2019.
Inside [Playdead] — 2016.
Hunt: Showdown [Crytek] — 2019.
The Legend of Zelda: Breath of the Wild [Nintendo] — 2017.
Alien: Isolation [Creative Assembly] — 2014.
Dark Souls [FromSoftware] — 2011.
Halo Infinite [343 Industries] — 2021.
Cyberpunk 2077 [CD Projekt RED] — 2020.
https://camo.githubusercontent.com/bf5fab19ef48993bcd99a61f5d51f3b1fd4478850fc4bdd62439512e652ec4f3/68747470733a2f2f7261772e6769746875622e636f6d2f77696b692f6d697265712f617564696f2d7370656374726f6772616d2f73696d706c652e706e673f76323032322d31312d3237 Дата обращения — 26.11.2025.
https://www.asoundeffect.com/wp-content/uploads/2016/01/01_game_audio_Explosion.png Дата обращения — 26.11.2025.
https://www.asoundeffect.com/wp-content/uploads/2016/01/04_game_audio_Delay_Mod.png Дата обращения — 26.11.2025.
https://www.asoundeffect.com/wp-content/uploads/2016/01/08_game_audio_Blueprint-1024x423.png Дата обращения — 26.11.2025.
https://www.frontiersin.org/files/Articles/1334776/fevo-12-1334776-HTML/image_m/fevo-12-1334776-g002.jpg Дата обращения — 26.11.2025.
https://static.wixstatic.com/media/ebb935_7f42dab208a942eaa9eb4bb14797b876~mv2.jpg/v1/fill/w_700,h_378,al_c,lg_1,q_80/ebb935_7f42dab208a942eaa9eb4bb14797b876~mv2.jpg Дата обращения — 26.11.2025.
https://images.squarespace-cdn.com/content/v1/5c89cf5c755be2301e0692e9/1552642713846-L2UBTG2FE671SSZVXVZH/the-rain-cover.png?format=1000w Дата обращения — 26.11.2025.
https://switchplayer.net/wp-content/uploads/2019/12/Switch_Alien_02-700x393.jpg Дата обращения — 26.11.2025.
https://images.cgames.de/images/gamestar/4/forza-horizon-5-guides_6160216.jpg Дата обращения — 26.11.2025.
https://docs.flightsimulator.com/html/mergedProjects/How_To_Make_An_Aircraft/assets/images/audio/tools/tools_4_profiler.png Дата обращения — 26.11.2025.
https://i0.wp.com/media.criticalhit.net/2018/12/senua-fight.jpg?resize=750%2C361&ssl=1 Дата обращения — 26.11.2025.
https://images.squarespace-cdn.com/content/5f2b7d0eba5613312baef0bc/1625005395783-NM42JUJ9EDFL0WTRUF7X/INSIDE+-+Screenshot2-500p.jpg?content-type=image%2Fjpeg Дата обращения — 26.11.2025.
https://www.firewatchgame.com/screenshots/firewatch-e3-5.jpg Дата обращения — 26.11.2025.
https://i.pinimg.com/736x/65/00/bc/6500bcf254bf3813694e0fcaed85ccb7.jpg Дата обращения — 26.11.2025.
https://user-images.githubusercontent.com/766596/130336042-eedbe68e-7d35-48c5-82bb-dccb5c55f7d5.png Дата обращения — 26.11.2025.
