'Art match-mashups 아트 매치-매시업_예술 : 기술 : 향유' 360° 3D 영상_유한이 작가

유한이_360° 3D 영상_모니터 및 오큘러스 출력_2022
2022 '아트 매치-매시업 Art match-mashups_예술:기술:향유'는 시각 예술가의 스타일 및 진술이 담긴 딥러닝 2D 이미지 생성 경험을 확장하여 3D 모델링, 리얼리티 캡처, 인공지능 3D 인터폴레이션(interpolation) 등 첨단 기술 융합으로 가상·혼합현실(VR, MR)을 체험할 수 있는 실감형 미디어 콘텐츠로 구현하여 창작과 감상의 경험 영역을 확장해 가기 위한 프로세스형 융복합 작업이다. 참여작가인 김창겸 · 양대원 · 유한이 · 이돈순 · 홍경택의 작품에 담긴 창작 스타일을 학습하여 생성해 낸 인공지능의 생성물을 예술가의 관점에서 선별하고, 거기서 추출된 창작 콘텐츠를 작가 진술이 포함된 3D 데이터로 만들어 인공지능의 기계적 한계와 무한한 변용 사이에 놓인 예술과 기술의 공존 가능성을 모색했다.
지난 프로젝트에서 StyleGAN2-ada 등 인공지능 프로그램으로 작가들의 스타일을 학습시키고 그 결과물을 생성하는 데 주력했다면, 이번엔 작가의 스타일과 진술 내용을 토대로 360° VR 영상의 가상 및 증강현실이나 홀로렌즈를 활용한 3D 혼합현실 등 실감형 미디어 콘텐츠로 구현하는 데 주력하였으며, 그 과정에서 디지털 조형물 또는 3D 메시(Mesh) 오브제로 모델링하기 위해 블렌더(Blender)와 유니티(Unity), 리얼리티 캡처(RealityCapture), 형태 변환 및 후가공을 위한 인공지능 기술이 사용되었다. 작가의 대표 캐릭터를 모델링하거나 리얼리티 캡처 등을 거쳐 형태를 완성한 다음에는 작가 고유의 이미지를 결합하는 과정에서 인공지능 UV 맵핑 기술이 적용되었고, 타깃 이미지 데이터를 포인트 클라우드(Point Cloud) 형태의 3D 보간영상(Interpolation)으로 구현하기 위해 SP-GAN 등 인공지능 기술을 접목했다.
증강현실(Augmented Reality)은 현실의 배경에 가상의 CG 이미지나 영상을 입혀 현실을 기반으로 한 가상의 콘텐츠를 체험하는 것으로, 이번 프로젝트에서는 작가의 원본 작품 및 스타일, 진술 내용을 스토리라인으로 구성하고 이를 360° VR 영상으로 제작했으며, 현실과 가상의 결합이라는 새로운 창작 실험과 웨어러블 기술 기반의 입체적 경험의 확장을 통하여 평면과 입체, 온오프라인을 통합하는 실감형 미디어아트를 구현함으로써 관객과 공유하고자 했다.
참여작가 : 김창겸 · 양대원 · 유한이 · 이돈순 · 홍경택
360° VR 영상 제작 : 강민 · 정가연 · 조윤서 (한국예술종합학교 영상원)
리얼리티 캡처 : 김우섭 (가천대학교 예술대학)
인공지능 기술감독 : 조형래 (서울과학기술대학교 지능형미디어연구센터 연구원)
인공지능 기술자문 : 박구만 (서울과학기술대학교 전자IT미디어 공학과 교수)
프로젝트 코디네이터 : 이나래
기획 : 오픈스페이스 블록스 (김은영 · 이돈순)
#예술과기술의융합
#Art&Tech
#아트매치매시업
#Artmatch_mashups
#인공지능예술
#인공지능미술
#인공지능그림
#AI_Art
#딥러닝
#아트매칭
#실감형미디어
#증강현실
#Augmented Reality
#혼합현실
#Mixed Reality
#3D보간영상
#Interpolation
#미디어아트
#인터렉티브아트
#interactive art
#오큘러스
#Oculus
#홀로렌즈
#HoloLens
#360°VR영상
#리얼리티캡처
#Reality Capture
#라이프로깅
#lifelogging
#오픈스페이스블록스
#openspaceBLOCK's
#김창겸작가
#양대원작가
#유한이작가