Беседа с Ягизом Мунганом, художником CODAME

Серия интервью артистов и докладчиков, представленная на фестивале CODAME ART + TECH [2018] Ирэн Малатеста

Ягиз Мунган, междисциплинарный художник

Междисциплинарный художник Ягиз Мунган создает произведения, в которых сочетаются VR / AR, звук / музыка, взаимодействие, производительность, виртуальные миры и игры. Он особенно заинтересован в генеративных стратегиях создания визуалов и звука, а также в способах использования технологий, чтобы раздвинуть границы человеческого восприятия и эмоционального отклика. Его работа часто направлена ​​на то, чтобы пересмотреть знакомый опыт или обратиться к сверхъестественным техническим встречам в современной жизни.

Мунган имеет степень магистра в области компьютерной инженерии и MFA в области интерактивного искусства, а также выставляет свои работы по всему миру. На фестивале CODAME ART + TECH в 2018 году Мунган представит проект под названием Illy, ИИ, который общается через звук без языка.

В этом году на фестивале CODAME под кодовым названием #ARTOBOTS пройдут 4 дня инсталляций, семинаров, бесед и многого другого, и все они сосредоточены вокруг растущего влияния искусственного интеллекта и робототехники в современном мире. В этом разговоре Мунган обсуждает эти темы и многое другое, в том числе свои фоновые и ранние звуковые эксперименты, как он смешивает различные технологические среды для создания нового медиа-арта и как VR может помочь нам пережить невозможное.

IM: Привет, Ягиз, спасибо, что согласился поболтать. Вы художник, работающий с интерактивными инсталляциями, интерактивной музыкой и смешанной реальностью. Не могли бы вы начать с того, чтобы немного рассказать о себе и о том, какую работу вы делаете?

Й.М .: Мне нравится создавать интерактивные вещи или генеративные вещи, где компьютер или программное обеспечение являются частью опыта активного агента. Когда-то я изучал инжиниринг, и меня вдохновило посмотреть, как сделать мои проекты более креативными. Я изучил алгоритмические и генеративные подходы к моей работе. Я смог добраться туда, где не было пользователя, но было больше выражения через программное обеспечение. Оттуда я попал в игры: игровой дизайн и интерактивные инсталляции.

Я всегда работал с музыкой и искусством, но технология и искусство были действительно двумя отдельными вещами, когда я был моложе; они не существовали вместе. Моя идея объединить их выросла со временем. Когда я приступил к генерации алгоритмов, я написал программу, которая сочиняла музыку и создавала визуальные эффекты. Я попал в системы, с которыми вы можете взаимодействовать, для создания музыки, видео, создания кода для игры или инсталляций.

Смешанная реальность или виртуальная реальность - это просто еще одна среда для создания инсталляций, если хотите. А в VR у вас нет физических ограничений на то, что вы можете создать.

Похоже, вы можете описать себя в основном как художника, который работает с интерактивностью, и все эти разные среды были разными способами достичь этого.

Это один из способов выразить это, да. Для меня, я бы сказал, «междисциплинарный» художник, потому что кодирование это мое ремесло. Для меня звуки всегда являются наиболее важными аспектами: я всегда стараюсь сделать их ориентированными на звук или музыку. Визуальные эффекты всегда присутствуют, но я всегда стараюсь сделать звук очень важной частью проекта и строить вокруг него, а не «давайте поместим немного музыки на задний план». Вместо этого я обычно хочу сделать это о создании музыки.

Это интересно, потому что это действительно отличная точка зрения о том, является ли музыка предметом или музыка на заднем плане. Вы уже упоминали, что кодирование - это ваше ремесло. У вас есть степень магистра в области компьютерной техники, а также степень магистра по электронному искусству. Не могли бы вы немного рассказать о своем прошлом и о том, откуда вы родом, и как вы решили продолжить этот формальный курс обучения?

Я родом из Турции. Откуда я в детстве, в начале 2000-х годов, это была культура, где, если вы успешный студент, вы должны идти и изучать определенные предметы. У меня не было слишком много вариантов для выбора, поэтому я изучал инженерное дело.

Я всегда чувствовал, что чего-то там не хватает. Когда я получил степень магистра, я перешел от исследования того, что можно сделать с помощью программирования или инженерии, к пониманию, хорошо, я могу использовать это для создания музыки, которая мне нравится. Моя магистерская работа была о создании композиций алгоритмически. Как только я закончил с этим, я подумал, что я также хотел немного взаимодействия с пользователем.

Мой второй Мастер был посвящен интерактивному искусству как основанной на времени среде. Это было сфокусировано на инсталляциях, новых художественных идеях и взаимодействии с пользователем. Это был мой путь.

Ваш творческий путь действительно имеет большой смысл: вы были UX-разработчиком, преподавателем университета, вы работали над дизайном игры… вы сделали много разных вещей, но все они включали в себя этот компонент творчества, создания чего-то и интерактивности и машиностроение. Вы также много путешествовали. Можете ли вы прокомментировать ваши рабочие места и города, в которых вы работали?

Это интересный вопрос, потому что я провел так много времени в аспирантуре. Когда дело доходит до работы, названия, которые я сменил, меняются, но в основном это то же самое. То, что я нахожу наиболее интересным, - это работа, которую я выполняю вне моей обычной «работы». Люди, с которыми я встречаюсь, сообщество техников и художников в Сан-Франциско. Общение с людьми в этом сообществе всегда более чем интересно, это заставляет меня чувствовать, что мне нужно делать больше. Не в конкурентной борьбе, но вы знаете, я чувствую себя вдохновленным!

Я был во многих городах. Я был в Индиане после окончания учебы. Я был в Швеции, а затем некоторое время в Германии. Много времени в Турции. Что касается художественного сообщества, я не могу сравнить, скажем, Индиану с Сан-Франциско, потому что это так отличается. Здесь всегда можно встретить новых людей. Здесь так много всего происходит.

Что касается вашей работы, был ли какой-то конкретный проект, который вдохновил вас на раннем этапе?

Я всегда занимался музыкой с семи лет. Мой основной инструмент - гитара. Я также играю на синтезаторах. Я думаю, что это началось, когда я был в классе, и я сделал очень простой звуковой код, и мне было интересно идти дальше. Я посмотрел на фундаментальные исследования, там есть много вещей, и я понял, что существует эта область, которую я мог бы изучить, исследовать, чтобы улучшить себя.

Для первой части это было немного случайно. Например, вы все время получаете рекламу, электронные письма от поставщиков и все, смотрите нового докладчика, что угодно. Я помню, я получил электронное письмо, в котором утверждалось, что у нового докладчика была какая-то особая частотная характеристика, и я подумал: «Люди не могут этого слышать!» Я был вдохновлен, чтобы проверить это. Я сделал простой код для воспроизведения этого звука и, конечно, мы ничего не слышали от ноутбука.

Это был просто ранний эксперимент. Мне было просто весело, а потом я понял, что на самом деле могу создавать музыку таким образом. Со временем я обнаружил целый ряд инструментов, которые люди использовали для креативных технологий. Это был первый шаг для меня.

Давайте поговорим немного о работе, которую вы делаете сейчас. Не могли бы вы немного рассказать о ваших текущих творческих проектах, что вас больше всего волнует, а также о том, что побуждает вас создавать их? Зачем ты их делаешь, о чем хочешь больше всего общаться?

Ну, моя работа идет по двум путям. Иногда в визуальном искусстве есть что-то, что я хочу исследовать, или какое-то взаимодействие с пользователем, которое мне интересно. Таким образом, нет никакого реального сообщения или значения, но я просто хочу увидеть, где я окажусь в более эстетической позиции. Иногда, как будто что-то беспокоит меня или заставляет меня думать, я делаю часть об этом.

Прямо сейчас я двигаюсь к большей работе с музыкальными визуализаторами, создавая абстрактные пейзажи через музыку. Я пытаюсь уйти от старых абстрактных форм и получить более реалистичные визуальные эффекты. Это забавный проект, в котором рассматриваются некоторые визуальные эффекты, которые я могу проехать через звук.

Что такого в пейзажах, к которым вы тянете, почему пейзажи?

Ну, я бы сказал, не как пейзаж, как в природе, а, например, в городе. Например, когда вы сидите в кафе и смотрите, как люди переходят улицу. Я могу создать что-то подобное, что было бы невозможно в реальной жизни, когда некоторые люди движутся вверх, некоторые люди движутся вниз…

И тогда я могу использовать захват движения, чтобы создать это. Меня интересует разбитость, тот факт, что они действительно не существуют или не могут существовать.

Для создания своих работ вы используете Unity и WebGL. Не могли бы вы немного подробнее рассказать о средах и инструментах, которые вы используете для создания своей работы? Что для вас наиболее важно?

Да, это мои два основных инструмента для визуальных эффектов. Мне нравится работать в космосе, а работа в физическом пространстве интересна, но не всегда доступна или практична. Вот почему я люблю работать в виртуальных пространствах или комбинировать их, как будто есть некоторые физические аспекты виртуальных аспектов. В этих случаях я использую Unity или WebGL.

Причина, по которой я могу выбрать одно или другое, заключается в том, что в одном из них есть что-то конкретное, что мне нужно. В основном я выбираю на основе средств распространения. Если мне нужно будет распространить работу онлайн среди людей, я перейду к WebGL, в браузере, мне нравится использовать библиотеку three.js, чтобы вы могли просто поделиться ссылкой, и другие получили к ней доступ. Для событий, основанных на событиях, мне нравится использовать Unity. Это очень весело и легко с множеством возможностей. Это немного сложнее распространять.

Другая вещь, которую нужно учитывать, - это верность. С моим набором навыков я могу получить лучшее качество в Unity, что иногда важно. Для звука это немного интересно для звука. Я люблю Unity, но его возможности создания звука довольно ограничены. Большую часть времени я связываю другую вещь, такую ​​как MAX / MSP, которая похожа на инструмент живой производительности, но который усложняет развертывание или отправку всего продукта в целом.

Когда я работаю в космосе, мне нравится использовать много звуков в этом пространстве, чтобы вернуться в экспозицию, захватывая звуки и обрабатывая их обратно. Мне также иногда нравятся мои собственные композиции, играющие на гитаре, как часть опыта, который я создаю.

По вашему мнению, какой эмоциональный художественный контент становится возможным благодаря технологиям смешанной реальности? Вы работаете в VR со всеми этими новыми инструментами. Очевидно, есть причина, по которой художники хотят использовать виртуальную реальность, чтобы сообщить что-то новое, верно?

Да. В физическом мире есть много вещей, которых вы не можете достичь из-за базовых ограничений, таких как пространство или ресурсы, такие как деньги и так далее. Что дает вам VR - это способность создавать вещи, такие как невозможные сценарии. Это ставит вас в невозможное с точки зрения первого лица. Все становится внезапно реальным, типа «я могу прикоснуться к этому».

Одной из вещей, которые я сделал недавно, был виртуальный танец и танец. Фрейя Олафсон и я создали эти танцующие аватары. Создав их достаточно, вы просто почувствовали, как будто вы находитесь на лесной гряде возвышающихся, роботизированных, движущихся аватаров. Это создало чувство возвышенного. Вы не можете добраться туда очень легко. Достигнуть этого до невозможного, но вы вдруг чувствуете, что «я на самом деле здесь, это невозможно».

Некоторые люди используют виртуальную реальность, чтобы воссоздать физический мир, и тогда он просто становится забавным, как шутка. Для меня интересно то, что люди попадают в эти невозможные ситуации, когда это становится очень личной формой опыта. Вы видите это своими глазами. Это действительно может добраться до вас.

Фото из фильма «Движение после» Фреи Бьорг Олафсон и Ягиз Мунган, 2017. Фото Робби Суини. Эта работа была разработана в рамках программы ввода в действие CounterPulse Artist Residency при поддержке Национального фонда искусств, Фонда семьи Целлербахов и Фонда искусств Кена Хемпеля. Больше информации здесь.

Художники очень давно взаимодействуют с возвышенным по-разному. Считаете ли вы, что технология смешанной реальности является особенно хорошей средой или пространством для передачи этого чувства?

Да, я так думаю. Это средство для всего, но тот факт, что вы можете поместить людей куда угодно, очень силен, потому что вы можете поместить людей в то, что вы себе представляете, не только в ландшафте, но и в состоянии ума. Это не должно быть реальное пространство, на котором они могли бы стоять. Это может быть пространство без земли или переходное пространство. Это могут быть просто огни и звуки. Это может быть без места. Это довольно сильно.

Абсолютно. А как насчет заглянуть в будущее немного? Существуют ли новые технологии, которые вас очень волнуют, которые все еще находятся на стадии проверки концепции, но, на ваш взгляд, еще не полностью использовались для создания художественных работ высокого уровня?

Всегда есть линейный прогресс, который имеют развивающиеся технологии. Мы все еще имеем дело с сетевыми кабелями, и иногда кабели становятся более неприятными, чем кусок! Но что касается новых технологий, было бы интересно посмотреть, куда идет AR. На данный момент он просто очищает поверхностный уровень, но когда он становится на самом деле, трудно сказать, что такое дополненная реальность, а что физическое. Это будет интересно и страшно.

Взгляды Или, Ягиз Мунган

Давайте поговорим о предстоящем фестивале CODAME ART + TECH. Можете ли вы рассказать нам о работе, которую вы будете показывать?

Это будет версия Illy, которая является полуинтеллектуальной системой. Это развивающийся проект, который был в течение некоторого времени.

Отправной точкой для Illy было устройство: Amazon Alexa или Google Home. Когда вы используете один из них, вы говорите с пластиковой вещью, говорите что-то и ожидаете результата. И когда вы получаете такой результат, вы чувствуете себя счастливым и удовлетворенным, но когда он говорит: «О, я этого не получил», вы чувствуете разочарование. Когда он играет не ту песню, вы расстроены.

Пройдя через этот процесс с моим акцентом, я был обеспокоен тем, что могу так расстроиться из-за пластикового бота. Подумав немного, я придумал Illy - искусственный интеллект, который не понимает по-английски. Illy не понимает ни одного языка, не понимает разговоров, но пытается интерпретировать голоса, высоту звука, громкость, основные характеристики звука и пытается ответить на основании этого. Это создает общение, в котором обе стороны знают, что не будет никакого понимания. Это зависит от вас, чтобы придать какое-либо значение тому, что он говорит.

То есть он общается, когда вы говорите с ним, но не на языке?

В точку. Разговор больше похож на монолог, но все зависит от вас. Так что это основная идея. Также будет проект VR или большой дисплей. Вы можете смотреть на Илли как на вещь, которая просто издает грубые звуки, или это может быть ваш самый понимающий питомец, или вы можете относиться к нему как к ребенку. Как вы знаете, вы говорите с ребенком. Вы знаете, что ребенок не понимает вас. Это все о том, как вы себя чувствуете.

Что бы вы хотели, чтобы люди знали о вашей работе? Или что бы вы хотели, чтобы они больше всего думали, когда увидят вашу работу на фестивале?

Речь идет о наших отношениях с вещами, с технологиями, с ИИ, и о том, как средства коммуникации меняют наши взгляды и ожидания. Как, например, я сейчас что-то говорю, и вы можете понять, потому что мы используем одни и те же символы, но если бы я говорил по-турецки, это было бы просто шумом и совершенно не ценно для вас.

Или рассмотрите отношения между людьми, например, когда вы идете в кафе и просите кофе. Большую часть времени в нашей стремительной жизни мы ожидаем: «Этот человек дает мне кофе». Если этот человек пытается поболтать с вами, ваша реакция такова: «Мне нужно идти, почему вы тратите мое время!» Это такая маленькая вещь, но быть действительно осведомленным об этих взаимодействиях, а не подсознательно, совсем по-другому.

Интересно подумать о том, как звук, качество звука и значение языка часто смешиваются. Как и в вашем проекте: вы представляете это таким образом, но мы знаем, что можем сказать что-то среднее очень приятным голосом, и наоборот. Нам очень легко иметь эти ожидания, которые затем ошибочны, потому что мы просто применяем нашу собственную точку зрения.

Это культурная конструкция. Разные языки по-разному говорят. Например, для некоторых произнесение чего-то «милого» на одном языке может звучать так, будто я говорю с вами. Все эти значения являются искусственными культурными вещами, с которыми мы должны согласиться. Вам нужен правильный декодер, чтобы понять, а что, если у вас его нет?

Подключитесь и узнайте больше о Ягизе Мунгане на сайте CODAME:

Вы можете найти его работу на фестивале CODAME ART + TECH [2018], четырехдневной конференции с семинарами, беседами и мероприятиями в ночной жизни @ Midway, Сан-Франциско, 4–7 июня 2018 года, под кодовым названием #ARTOBOTS:

Фестиваль CODAME ART + TECH [2018] #АРТОБОТЫ

Ирэн Малатеста - писатель, креативный стратег и любитель цифрового искусства в Сан-Франциско. Вы можете найти ее в Twitter и Instagram @irenekaoru.