[Front Line of AI X Art #2] 예술과 기술의 지평선, 인터랙티브 미디어아트

디지털 속에서 사람은 감상자이면서 동시에 그 세계에서 돌아다닐 수 있고,
보고 있는 것과 자신과의 경계도 없다.

- Inoko Toshiyuki, TeamLab

작품의 일부가 되는 관객 (Audiences That Become Part Of Art)

모든 기술은 예술과 맞닿아 있다.
대게 두 분야는 서로 다른 영역으로 간주되지만, 매우 유사한 특성을 가진다. 예술과 기술 모두 끊임없는 창조를 통해 인류의 삶에 혁신적으로 접근하고 새로운 가치를 탄생 시킨다.

기술의 점진적인 변화는 인간이 감각하는 세계를 예술의 영역으로 확장시켰다. 디지털과의 밀접한 연결을 통해 지금껏 만나 보지 못했던 독창적 예술의 세계가 펼쳐진 것이다.

인공지능으로 생성한 이미지 (출처 : CUZ)

여기, 예술과 기술의 공존을 보다 잘 보여주는 사례가 있다. 바로, ‘인터랙티브 미디어아트 (Interactive Media Art)’ 다.
인터랙티브 미디어아트는 ‘상호작용 (Interaction)’을 기반으로, 관객과 작품의 양방향적인 소통을 추구한다. 이전까지의 관람객은 단순히 작품을 관람하는 ‘감상자’ 였다면, 미디어 아트는 관객의 역할을 ‘참여자’로 확장 시킨다. 즉,  ‘관객이 능동적으로 참여함으로써’ 비로소 하나의 완성작이 되는 것이다.

그렇다면 관객은 어떻게 예술에 참여할 수 있는 것이며, 이를 가능케 하는 기술은 무엇일까.
오늘은, ChatGPT와의 대담을 통해 인터랙티브 미디어아트에 대해서 알아보고, 예술에서 상호작용성의 중요성과 그 활용 기술을 알아보고자 한다.

인공지능으로 생성한 이미지 (출처 : CUZ)

* 이후의 글은 ChatGPT와 Midjourney를 활용, 인공지능이 작성한 포스팅입니다.

인터랙티브 미디어아트 (Interactive Media Art)

안녕하세요, ChatGPT 님. 그동안 잘 지내셨나요?

네, 안녕하세요. 저는 인공지능 모델이기 때문에 생각과 느낌이 없지만, 항상 최선을 다해서 노력하고 있습니다. 질문이 있으면 언제든지 물어보세요.

오늘은 미디어아트의 ‘상호작용성 (Interaction)’에 대해서 말씀드리려고 합니다.
인터랙티브 미디어아트 (Interactive Media Art)를 알고 계시나요?

네, 저는 인터랙티브 미디어아트에 대해 알고 있습니다. 인터랙티브 미디어아트란, 관객의 참여와 상호작용을 통해 작품의 내용이나 형태가 완성되는 것을 의미합니다.
작품은 디지털 기술을 활용해 관객의 오감과 감성을 자극하고, 이를 통해 관객은 예술에 대한 시각적 경험을 확장할 수 있습니다. 기존 아트가 시각만 활용했다면, 최근에는 시각, 촉각, 후각을 활용해 온전히 작품에 몰입 시키는 참여 지향적인 미디어아트의 사례를 쉽게 찾아볼 수 있습니다.

네, 그렇다면 왜 많은 작품들이 관객과의 상호작용을 활용하려고 하나요?

첫째, 인터랙티브 미디어아트에서 관객과의 상호작용은 작품의 경험적 가치를 높이기 위해 중요하기 때문입니다. 관객은 
상호작용을 통해 프레임(frame)에 국한되어 있던 작품의 경계를 허물고, 작품의 일부가 됩니다. 예를 들어, 관객이 작품이 일부분을 제어하면서 자신만의 방식으로 새롭게 해석하고, 이는 기존의 작품보다 더욱 새롭고 기억에 남는 경험이 될 수 있습니다.
둘째, 콘텐츠를 직접 보고 느끼는 활동은 새로운 문화적 가치를 창출 시킬 수 있기 때문입니다. 관람객은 상호작용을 통해 
개인적인 경험을 공유하고, 이는 예술과 기술, 그리고 사회와 사람 간의 교류를 촉진시키게 됩니다. 다양한 문화적 배경을 가진 사람들이 모여 거대한 담론이 형성되고, 기존의 예술의 형태에서는 불가능했던 개방적이고 자유로운 문화적 의미를 창출하게 됩니다.

인공지능으로 생성한 이미지 (출처 : CUZ)

인터랙티브 미디어아트가 혁신적인 예술 경험을 제공하는 데 효과적이라는 이야기 시군요.
미디어아트의 상호작용을 위해서 사용되는 기술은 무엇이 있나요?

미디어아트의 상호작용을 위해서 사용되는 기술은 다양합니다. 그중에서도 대표적인 기술을 말씀드리겠습니다.

  1. 센서 기술(Sensor technology): 센서 기술은 작품과 관객 사이의 상호작용을 감지하고 제어하는 데 사용됩니다. 예를 들어, 관객의 움직임, 소리, 빛, 온도 등을 감지하여 작품의 동작을 제어하거나 조작하는 데 사용됩니다.
  2. 컴퓨터 비전 기술(Computer vision technology): 컴퓨터 비전 기술은 카메라와 이미지 처리 기술을 사용하여 작품과 관객 사이의 상호작용을 감지하고 제어하는 데 사용됩니다. 예를 들어, 관객의 움직임과 제스처를 감지하여 작품의 동작을 제어하거나 조작하는 데 사용됩니다.
  3. 가상현실 기술(Virtual reality technology): 가상현실 기술은 가상현실 환경을 만들어 작품과 관객 사이의 상호작용을 구현하는 데 사용됩니다. 관객은 가상현실 환경에서 작품과 상호작용하며, 그 결과로 새로운 참여적 경험을 얻을 수 있습니다.
  4. 음성인식 기술(Voice recognition technology): 음성인식 기술은 작품과 관객 사이의 상호작용을 감지하고 제어하는 데 사용됩니다. 관객의 음성 명령을 인식하여 작품의 동작을 제어하거나 조작하는 데 사용됩니다.
  5. 인터넷 기술(Internet technology): 인터넷 기술은 작품과 관객 사이의 원격 상호작용을 가능하게 합니다. 관객은 인터넷을 통해 작품에 접근하고, 작품과 상호작용할 수 있습니다.

이러한 기술들이 미디어아트에서 상호작용성을 향상시키고, 참여적인 예술 경험을 제공하는 데에 활용됩니다.

인공지능으로 생성한 이미지 (출처 : CUZ)

그렇군요. 작품과 사회적인 측면 외에, 관객이 직접 참여하는 인터랙티브 작품이 늘어난다면
우리(관람자)에겐 어떤 이점이 있을까요?

우리에게는 다음과 같은 이점이 있습니다.

  1. 참여적 체험: 관객들은 작품에 직접 참여하며 색다른 체험을 할 수 있습니다. 이를 통해 예술 작품에 대한 재미와 흥미를 느끼며 미디어아트에 대한 이해도와 관심도가 높아질 수 있습니다.
  2. 창의성과 상상력 향상: 인터랙티브 작품은 참여적 체험을 통해 관객들에게 창의적 자극을 줄 수 있습니다. 관객들은 작품에 대해 자신만의 해석과 느낌을 가지고 참여하게 되며, 이를 통해 새로운 아이디어와 창의적인 생각을 유발할 수 있습니다.
  3. 교육적 지식: 예술작품은 관객에게 다양한 시각적, 문화적인 지식을 전달해 주는 역할을 합니다. 관객이 직접 참여하면서 예술과 기술의 연결점을 찾고, 이를 통해 작품의 의의와 가치를 학습하게 됩니다.
  4. 사회적 상호작용 소통: 인터랙티브 작품은 관객들과 작품, 작가와 관객, 관객과 관객끼리 자유롭게 소통할 수 있는 환경을 제공합니다. 관객은 자신만의 창의적인 방식으로 환경과 상호작용하며, 이를 통해 사회적 정체성과 관계를 형성할 수 있습니다.
  5. 기술적 발전: 인터랙티브 작품은 디지털 기술을 활용하여 제작되기 때문에, 더욱 다양하고 혁신적인 기술적 발전을 촉진합니다. 작가나 기술자들은 상호작용성을 높이기 위해 다양한 기술을 개발하고 적용하며, 이는 예술 분야뿐만 아니라, 디지털 기술의 발전과 적용 분야를 넓히는 데 기여할 수 있습니다.

이러한 이점은 관객에게 더욱 다양한 창의적 시각을 갖게 하고 예술 문화를 적극적으로 향유할 수 있게 하여, 앞으로도 참여적 예술 문화가 더욱 활성화될 것으로 기대됩니다.

미래에 더욱 많은 인터랙티브 미디어아트 작품이 탄생하기 위해선 어떠한 노력이 필요할까요?

인터랙티브 미디어아트는 점점 더 많은 사람들이 경험하고 참여하는 분야가 되고 있습니다. 이에 따라 미디어아트 작가들과 기술자들은 작품을 더욱 발전시키고, 참여자들의 경험을 더욱 풍부하게 만들기 위해 다양한 기술적, 윤리적 노력이 필요합니다.

1. 기술적 노력

  • 다양한 센서 기술과 인터랙션 기술: 관람자의 동작, 음성, 이미지 등 다양한 데이터를 수집하고 처리하는 기술의 발전으로 참여의 폭을 더욱 넓힐 수 있습니다.
  • 실시간 처리 기술: 관람자의 데이터를 실시간으로 처리하여 작품의 반응성을 높여야 합니다.
  • 인공지능과 머신러닝: 인터랙티브 미디어아트 작품에 인공지능과 머신러닝 기술을 활용하여 작품이 참여자와 상호작용하면서 변화할 수 있도록 해야 합니다.
  • 사용자 경험: 인터랙티브 미디어아트는 참여자들의 경험과 감정을 중요하게 다루는 예술 형식입니다. 따라서 참여자들이 편안하고 쾌적한 경험을 할 수 있도록 작품을 설계하고 구현해야 합니다.

2. 윤리적 노력

  • 개인정보 보호:  참여자들의 개인정보를 보호하기 위한 방법과 법적인 규제가 필요합니다.
  • 다양성과 인종차별 문제: 인터랙티브 미디어아트는 참여자들의 다양한 경험과 문화적 배경을 수용하고 존중해야 합니다. 따라서 인종, 성별, 장애 등 다양성을 존중하는 작품을 만들어야 하며, 작품 내에서 차별이나 괴롭힘 등의 문제가 발생하지 않도록 노력해야 합니다.

이러한 기술적, 윤리적 노력을 통해 미디어아트 작가들과 기술자들은 보다 참여적이고 다양한 경험을 제공하는 인터랙티브 미디어아트 작품을 탄생시킬 수 있습니다.

인공지능으로 생성한 이미지 (출처 : CUZ)

맺는말

‘관람자’에서 ‘참여자’로, 그리고 ‘작품의 일부분’으로 자리하기까지, 인터랙티브 미디어아트의 생산 방식과 지각 방식의 변화가 혁신적인 예술 경험을 제공하고 있다. ‘상호작용’이 다소 복잡한 기술의 적용일지라도, 디지털의 발전과 함께 나아가다 보면 인터랙티브 미디어아트가 동시대의 보편적 문화가 될 것이라는 믿음을 표한다.

Tags