Korean Society of Dance Science
[ Article ]
Official Journal of the Korean Society of Dance Science - Vol. 40, No. 2, pp.61-75
ISSN: 1229-7836 (Print) 2713-6949 (Online)
Print publication date 30 Apr 2023
Received 07 Mar 2023 Revised 03 Apr 2023 Accepted 18 Apr 2023
DOI: https://doi.org/10.21539/Ksds.2023.40.2.61

미메시스(Mimesis)로 본 딥페이크 기술의 무용예술 적용가능성 연구

박진서* ; 조남규**
*상명대학교 일반대학원 공연예술경영학과 박사과정 evie1016@naver.com
**상명대학교 일반대학원 공연예술경영학과 교수 cng1222@hanmail.net
A Study on the Application of Deepfake Technology to Dance in Mimesis
Jinseo Park* ; Namgyu Cho**
*Ph.D., Department of Performing Arts Management, Sangmyung University evie1016@naver.com
**Professor, Department of Performing Arts Management, Sangmyung University cng1222@hanmail.net


CopyrightⒸ 2023 by the Korean Society of Dance Science

초록

코로나19로 기존 무용을 비롯한 공연예술에도 관객과 소통하기 위한 다양한 변화가 있었다. 비대면의 시대에 영상 기술은 관객과의 관계를 이어주고 기술적 매개가 되어 공연예술 생태계에 공공연하게 자리 잡았다. 기술적 측면에서도 AI(인공지능)와 3D 모션 캡처, 딥페이크, 홀로그램, 음성합성 등의 기술을 결합하여 인간과 매우 흡사한 버추얼 휴먼이라는 가상 인물이 등장하면서 대중의 높은 관심을 불러일으키고 있다. 행동은 물론이며 말과 표정 모두 자연스러우며 심지어 즉각적인 대화가 가능할 정도다. 본 연구는 무용이 지닌 일회성과 현장성, 그리고 몸성과 관련하여 모방(미메시스, mimesis)가 지닌 재현의 가치를 중심으로 딥페이크를 비롯한 영상기술이 대체되는 현상을 살펴보는데 의미를 두었다. 이를 통해 딥페이크 기술이 무용예술적 측면에서의 순기능과 나아가 AI와 영상기술의 진화를 수용할 방안을 제시하였다. 방법적으로 본 연구에서는 사자(死者)를 영상 기술로 재현된 공연으로 관객과 소통하던 사례들을 살펴보았다. 더불어 실제 망자를 소환하여 산자와 만나게 한다는 측면에서 과거 망자 천도 의식과 매우 유사한 재현행위라는 점에서 매우 긍정적이나, 포르노로 제작 유통되거나 정치 선동을 위해 조작되는 역기능도 제시하였다. 이를 통해 본 연구는 딥페이크 기술을 비롯한 영상매체의 재현 기술을 아리스토텔레스의 미메시스 개념을 통해 살펴보고 그 가운데 복제가 원본을 능가하는 현상을 장 보드리야르가 제시한 시뮬라시옹 개념으로 살펴보았다. 결과적으로 우리는 무용이 지닌 육체성에 대해 다음과 같은 새로운 인식이 요구됨을 확인하였다. 첫째, 무용수 측면에서 관객의 인식 행위에 대한 새로운 인식이 요구된다. 카메라의 프레임을 통해 인식하는 시스템, 즉 무용수가 세계 속의 존재임을 인정하고 영상 기술에 대한 진화를 받아들여야 한다. 둘째, 딥페이크가 원본의 모방으로 비롯되지만, 여전히 가짜라는 복제물의 한계를 이해해야 한다. 그것을 인지하고 비도덕적 의도를 대응하는 방법이 필요하다. 셋째, 과거 소통 방식의 한계를 인정하고 디지털 체계 내에서의 소통과 소속감을 찾는 것이 요구된다. 나아가 과거 유명한 무용수나 그들의 안무를 복원할 때, 단순히 무보(score)에 그치지 않고 죽은자를 소환시켜 재현한다는 점에서 장소적 한계 극복과 무용예술적 측면에서의 적용가능성을 살펴보았다.

Abstract

During COVID-19, there were various changes in dance and performing arts to communicate with the audience. In the era of non-face-to-face, video technology connects to the audience and it has become public in the performing arts ecosystem as a technical intermediation. In terms of technology for a virtual human, it has emerged by combining AI (artificial intelligence) and other technologies such as 3D motion capture, deepfake, hologram, and voice synthesis. This is attracting high interest from many audiences. Not only actions, but also words and facial expressions are natural, and even instant conversations are possible. The meaning of this study is to examine a replacement phenomenon from reproduction value of mimesis regarding one-off, sense of realism and related to dance performance to video technology including deepfakes. Through it, deepfake technology provided a positive function in terms of dance and further suggested ways to accept the evolution of AI and video technology. In this study, we looked into performance cases performed and communicated with the audience by dead who revived through the video technology. Despite the positive aspect on video technology in term of recalling the dead, who was actual person, which similar to Ritual, it suggested a negative effect such as production and distribution of porn. In this study, we looked into video reproduction technology including deepfake via the Aristotle's Mimesis and review the Jean-Bordrian's Simulacion theory that the replica transcends the original. As a result, we noticed that the following new perception of the physicality of dance is required. First, a new perception of the audience's perception behavior is required in terms of dancers. The system recognized through the frame of the camera, that is, the dancer must be recognized as being in the world and accept the evolution of video technology. Second, it is necessary to understand the limitations of replicas that deepfakes were imitated from the original and still fake. There is a need for a way to recognize it and respond to immoral intentions. Third, it is required to recognize the limitations of past communication methods and to find communication and belonging within the digital system. Furthermore, when restoring famous dancers or their choreography in the past, the possibility of overcoming the limitations of places and aspect of dance was examined in that it was not just a score, but also summoned and reproduced the dead.

Keywords:

COVID-19, Simulacion, Deepfake, Dance, Mimesis, Imitation, Representation

키워드:

코로나19, 시뮬라시옹, 딥페이크, 무용, 미메시스, 모방, 재현

References

  • 국립국악원 VR공연 부채춤. 2020.3.18., 2023.3.2. 검색, 국립국악원, https://youtu.be/Cw7M6omUK8w
  • 국립국악원 희망ON 어떻게 만들어졌나?. 2020.6.2., 2023.2.14.검색, 국립국악원, https://youtu.be/1PimYGSgI-8
  • 국립현대무용단 유튜브 공연. <세 가지 각>, [댄스 온 에어] 삼물기, 2021.5.5., 2023.3.2.검색, Korea National Contemporary Dance Company , https://youtu.be/feJfhIazYQI
  • 권이선(2022.2.9.). 홀로그램 AI로 되살아난 별들: 산 자를 위한 ‘유령 노예’ 비판도. 세계일보. https://www.segye.com/newsView/20220208514424?OutUrl=daum, , 2023.2.14.일 검색
  • 김가은, 홍미성(2020). 포스트 코로나 시대 ‘라이브 스트리밍(live streaming)’ 무용공연의 시청현황과 개선방안. 한국체육학회지. 59(5).
  • 남정호 예술감독. <유연한 하루>, 온라인 홈트레이닝[유연한 하루] 몸으로 나를 만나기 4편, 2020.6.3., 2023.2.14. 검색, Korea National Contemporary Dance Company , https://youtu.be/L-tZrzdR1E0
  • 너를 만났다 시즌1. 2020.2.7, 2023.3.2검색, MBClife , https://youtu.be/uflTK8c4w0c
  • 너를 만났다 시즌3. 2022.5.13, 2023.3.2검색, MBClife , https://youtu.be/mGwHGdXTP5s
  • 목정민(2023.3.6.). [알아두면 쓸모있는 과학](16) 진짜 같은 가짜 영상 만드는 ‘딥페이크’. 주간경향, 1517. http://weekly.khan.co.kr/khnm.html?mode=view&artid=202004061513071&code=116, , 2023.2.14.일 검색
  • 박범태(2022). 동해안 오귀굿 중 초망자굿 연구. 미간행 박사학위논문. 고려대학교 대학원
  • 박혜원(2022.7.4). 송해·신해철·김광석의 ‘부활’ 어떻게?, jobsN, https://v.daum.net/v/Pci73YujlD, , 2023.2.14.일 검색
  • 사이버 가수 아담. 아담에서 로지로...진화한 ‘가상 인간’, 연예계 지각 변동?, 2021.8.11., 2023.2.14. 검색, 홍혜민, https://v.daum.net/v/20210811081807298
  • 아리스토텔레스, 천병희 역(2002). 시학. 서울: 문예출판사.
  • 에리카 피셔-리히테, 김정숙 역(2017). 수행성의 미학. 서울: 문학과 지성사.
  • 오현우(2020.5.26.). 전통예술에 VR·3D 접목…다채로운 경험 선사. 한경문화, https://www.hankyung.com/life/article/2020052681481, . 2023.2.14.일 검색
  • 이영란(2021.08). 최승희 무용 <장구춤> VR 콘텐츠 개발연구. 우리춤과 과학기술, 54.
  • 장 보드리야르, 하태환 역(2012). 시뮬라시옹. 서울: 민음사.
  • 최문선(2022). 장 보드리야르의 시뮬라시옹을 기반으로 한 모션 그래픽 활용- 창작 작품우리는 거기서 만나기로 했다를 중심으로. 미간행 석사학위논문. 국민대학교 일반대학원
  • 최윤영(1995). 진오기굿과 잔혹연극에 나타난 제의적 연극성 비교 연구. 미간행 석사학위논문. 동국대학교 대학원
  • 태혜신, 김선영(2019). 인공지능과 예술의 융합 양상에 관한 탐색적 고찰. 한국무용학회지. 36(2).
  • 플라톤, 박종현 역(1997). 국가. 서울: 서광사.
  • 플라톤, 박종현 역(2009). 법률. 파주: 서광사.
  • 한국관광공사 <범내려온다> 공연. Feel the Rhythm of Korea: SEOUL, 2020.7.30., 2023.2.14.검색, Imagine Your Korea, https://youtu.be/3P1CnWI62Ik
  • 허순철(2022). 유튜브 딥페이크(deepfake) 영상과 허위사실공표. 미디어와 인격권. 언론중재위원회. 8(1).
  • 홍혜민(2021.8.11.). 아담에서 로지로...진화한 ‘가상 인간’, 연예계 지각 변동?, 한국일보, https://v.daum.net/v/20210811081807298, , 2023.2.14.일 검색
  • AI기반 가상인간 로지. 아담에서 로지로...진화한 ‘가상 인간’, 연예계 지각 변동?,2021.8.11., 2023.2.14. 검색, 홍혜민, https://v.daum.net/v/20210811081807298
  • Imagine Your Korea. 2011. 6. 22, 2023.2.14.검색, https://www.youtube.com/@imagineyourkorea/about
  • tvN 회장님네 사람들 故 박윤배와 그의 딸. 2023.1.25, 2023.3.2검색, tvN D ENT, https://youtu.be/aqgC9DHieb8