IV. 첨단영상 매체의 미래
1. VR˜가상현실 테크놀로지
19 세기 이후의 영상매체의 역사는 올드미디어 Old Media 에서 뉴 미디어 New Media 로의 점철로 되어있으며, 여기에 가상현실 VR 은 하나의 잠재적이고 지속적인 패러다임으로 유지되어 왔다. 예를 들면 1951 년 런던만국박람회는 근대문명의 긍정적인 미래관을 가시화 시켰고 1900 년의 파리박람회를 시작으로, 거의 모든 파빌리언에 영상을 이용함으로써 영상박람회 라 불리우던 1967 년의 몬트리올박람회등, 20 세기의 모든 박람회의 핵심은 첨단영상을 이용하는 장대한 스페터클의 관람이었다. 즉 1895 년 시네마토그래피등장의 5 년후에 열렸던 파리박람회에서는 시네오라마 Cineorama 라는 장치가 선을 보였는데, 그것은 중앙에 방사형으로 배치된 10 대의 영사기가 만들어내는 거대한 원형의 스펙터클 화면을 통해 '가상의 실제'를 실현하고 있었다. 이 장치를 통하여 관객들은 곤돌라와 비슷한 형태로 만들어진 기구를 타고 하늘을 나르는 듯한 기분을 즐기면서 눈앞의 대형스크린에 영사되는 바르셀로나와 니스 혹은 북아프리카와 같은 이국적인 풍경을 '실제상황'으로서 하늘에서 내려다보며 감상을 했었다.
이러한 가상적 현실을 박람회를 통해 실현화 하려던 것은 중세 이래로 지속적으로 연구되어 왔던 카메라 옵스큐라의 영상에서부터 시작되어 다게레오타이프 Daguereotype 라는 사진술에 의한 화상 畵像˜의 형태로 나타났던 1939 년에서 였다. 이때부터 시작되어 VPL 사가 VR 을 선전하기 시작한 1989년까지의 150 년 동안에, 영상은 운동성 Animation 을 획득하여 Cinematograph, 음의 요소가 더해지고 Talkie, 색채 및 입체영상이 실현되었고, 화면이 시야를 전부 커버할 만큼 대형화되는 식으로 발전했다. 여기에는 인간의 꿈이나 기억속에서만 존재하는 영상을 눈앞의 대상으로서 현실화 現實化˜시키는
'대체현실 對替現實˜' 에 대한 인간 욕구의 반영이었다. 그러므로 가상현실은 '인간의 외계인식을 담당하는 시각 視覺, 청각 聽覺, 촉각 觸覺˜등의 지각 知覺˜기관에 대한 컴퓨터라는 기계에 의해 합성된 융합정보 融合情報˜를 제시함이며, 인간 주위에 가상적인 세계를 만들어 내는 일종의 시스템 System' 이라는 정도로 요약이 되어, 영화나 사진과 같이 우리 앞에 하나의 대상으로서 제시된 정보가 아니라는 것이다. 그러므로 우리를 감싸고 있는 환경이자 그 속에서 인간은 환경과 상호작용 ˜ 인터렉티브 ˜ 적인 관계에 놓이게 된다는 것이다. 따라서 인간이 '현실 現實' 이란 외부로부터의 감각정보를 인지 認知˜하는데, 기계장치로부터 이것이 인지되고 '진짜 현실' 속에 있는 것처럼 느끼게 된다는 것이 VR˜ 가상현실 의 핵심이다. 그러므로 이것은 VR 이라기 보다는 '인공적 Artifical 으로 만들어내는 현실감 現實感˜즉, AR28˜ 이라고할 수 있다.
이러한 스펙터틀한 영상이미지를 적어도 ˜ 테미네이터 2, ˜ 롬머맨 ˜ 그리고 ˜ 쥬라기공원 ˜ 까지 디지털 애니메이션 Digital Animation˜으로 만들어진 가상적 영상이 재현되어지며 영화화된 것은 자연적으로 설득력있고 재현할 수 없었던 공간의 표현이 가상화된 것이다. 즉 차거운 디지털 공간에서 탄생한 특수효과의 현실감이 고해상 High-end˜ 컴퓨터그래픽으로 인해 과거지사가 되어진 이제는 더욱 첨단화되어지는 멀티영상을 요구하는 등 극도의 현실감이 나는 가상현실감을 가진 특수영상을 요구하고 있다. 현대의 영상전달이 초고속화되어진 대중의 인지도는 특수효과에서도 속도와 질적인 요구를 더 해가고 있는 실정이다. 그러나 사이몬 페니는 "신기술들은 이것들을 역사가 없는 미래학적인 것으로 파악하거나 아니면 기껏해야 문화사와는 동떨어진 과학 科學˜·기술 技術˜의 계보 系譜˜에서 발생하는 것으로 파악하는 수사에 의해 알려지는 경우가 왕왕 있다."라고 말했다.
우리는 새로운 테크놀러지가 야기한 사회적 결과로 말미암아 어쩌면 현실상실을 체험하는 시대에 살고 있다고 본다. 즉 사회 속에의 개인뿐만이 아니라 사회전체가 발 밑에 놓인 현실의 지반을 상실하고 있다는 것이다. 진정 디지털가상 Digital Schein 29˜ 이다.
즉 모조 模造˜가 현실 現實˜을 대체 對替˜하고, 신화 神話˜가 부활하며 현실도피가 승리 勝利˜하는 시대가 도래된 것이다. 또 디지털 가상의 새로운 매체현실을 통찰할 수 있는 가장 유력한 수단은 일상 세계적 상황성인 것이다. 그러면 이러한 가상현실 Virtual Reality 시스템은 어떻게 구축하여지는 것인가를 알아보자면, 진정한 가상의 현실은 3D 컴퓨터 그래픽스와 네비게이션 ,상호작용의 세 가지 기본적인 필수요건을 갖추어야 한다. 첫번째의 기술요소인 3D 컴퓨터그래픽의 기술은 사용자의 반응에 따라 실시간에 만들어지는 3 차원 가상공간에 쓰이는 첨단영상기술이다. 컴퓨터로 만들어지는 가상현실은 직접 시뮬레이션 된 환경 속에 들어가 실제 그 환경에서 활동할 수 있게 만들어지며 정지된 환경이 아니라 동적인 환경으로 가상환경이란 무엇보다도 3 차원 공간감을 연출해야 하므로 3D 그래픽 기술이 사용되어지고, 일반적으로 3 차원 그래픽이라 하는 것은 움직임이 없는 3 차원이미지로 렌더링 된 그래픽을 말하고 3 차원 애니메이션은 전자의 렌더링이 된 3D 그래픽 화면이 연속적으로 빠르게 화면에 투사되어 동영상으로 표출되어지는 것을 말한다.
3D 그래픽은 픽셀효과, 라인 긋기, 폴 리 건 생성, Z 버퍼 링, 은선, 은면 제거 등과 같은 어려운 모듈작성에 시간을 할애할 필요가 없어지고 이제는 사용자는 단지 만들고자 하는 어플리케이션만 알면 된다. 결과적으로 3D 그래픽 엔진은 가상현실환경을 디스플레이 하기 위해 실시간으로 계산해내어 출력장치에 내 보내는 것이다. 입출력의 환경은 자연스러운 가상현실 시스템을 구축하기 위한 인간의 행동을 실시간의 감지를 해 내는 센스 기술과 추적의 기술로 소프트웨어 화 하고 있다. 네버게이셴의 구현기술은 가상세계를 탐험하는 것으로 구축된 가상환경을 사용자가 바라보는 시점에서 3D 뷰 가 형성이 되어 화면에 실시간 적으로 갱신되어 출력이 된다. 참여자는 자신이 위치한 곳에서 360 도 공간을 바라보기도 하며, 문을 열고 다른 방으로 들어가거나 이곳 저곳을 흩어보는 것이 가능하다. 즉 사용자의 임의의 방향으로 이동하는 것이 가능하며 실시간 탐험을 제공하는 능력을 말하고 있다.
네버게이션을 구현하려면 명령을 내리기 위한 도구가 필요한데 예를 들면 3D 마우스와 스페이스 볼과 같은 3 차원입력장치를 사용하기도 하며 때로는 손동작 인식용 장갑과 움직임으로 가능하게 만든다. 이제 상호작용관계인데 사용자의 의도대로 가상환경 세계의 상호정보교환이 이루어지는 것을 말한다. 예를 들면 손으로 잡는 동작을 하면 가상세계의 핸드이미지도 같이 따라 움직이며 객체를 조작하거나 선택할 수 있다. 따라서 상호작용은 상황의 변화를 일으키는 가상환경 대화 시스템이다. 일반적으로 상호작용기술 相互作用技術˜은 아직까지 손동작에 의해 이루어지고 있으며, 가까운 미래에는 눈동자의 응시추적 鷹視追跡˜또는 뇌파 腦波˜를 감지 感知˜하여 실시간 대화가 가능해질 것으로 보인다. 국내에서도 눈동자의 응시방향을 두 대의 비디오 카메라로 추적하여 가상세계에 명령을 내리는 기술이 산학 産學˜의 협력 하에 개발이 진행되고 있다. 상호작용기술을 보다 더 쉽게 이해하기 위해 게임이나 영화와의 관계성을 비교하면 쉽다. 영화는 일방적으로 관람자가 단지 감상만을 수동적인 자세로 하지만 게임은 사용자가 영상을 즐기면서 키보드와 마우스 같은 대화형 인터페이스를 가지고 능동적으로 상호작용 하는 시스템인 것이다.
앞에서와 같은 손가락을 움직여 명령을 지시하거나 눈동자의 움직임으로 실시간의 체크로 명령하기 위해서는 참여자의 신체의 전부나 일부분의 동작을 인식하는 센스기술이 필요해진다. 현재로는 그 기술은 크게 세 가지의 방식을 가지고 있는데, 첫째는 사람의 신체동작 身體動作˜을 인식 認識˜하는 방법이고, 둘째는 심볼 정보를 이용하는 방법이다. 세 번째 생체 生體˜의 정보를 이용하는 방법이다. 신체동작정보는 인간의 몸짓정보를 계측 計測˜하는 센스시스템을 사용하여 위치 位置, 방향 方向, 움직임 정보를 획득하는 것이다. 그리고 축에 의한 방식은 자유도가 큰 축의 관절 도를 측정 測定˜하여, 위치 位置˜와 각도 角度˜를 계산해 내는 방식이다. 이제까지 디지털 영상테크놀로지의 엄청난 발전으로 VR System 은 우리의 현실적 감수성을 인공적으로 위조할 수 있도록 기계적 시스템화를 발달시키고 ,현실과 특수영상현실의 경계를 허물고 있다. 그러므로 여러 가지의 VR 기술은 현실의 시간대와 공간을 이중화 할 수 있으면서 우주의 환경을 배우는 가상체험의 교육을 줄 수 있고 새로운 과학의 물리현상을 가상으로 배울 수 있다. 특히 의학 수술에 적용하여 어려운 수술인 두뇌의 영상을 시뮬레이션 화하여 복잡하고 미세한 부분을 확대하거나 작은 센서 티브 용원자 회로측정기를 이용하여 어려운 수술을 정확히 안내하여 가상수술을 할 수 있다. 오토바이형 시뮬레이터로 운전을 배우고, 의료기구용과 교육적 3 차원 별자리 탐구 등 과학적 지식을 가상으로 청소년들에게 배우게 하는 현실성도 있는 시스템이다.
이러한 가상현실이라는 용어를 자연스럽게 사용하게된 것은 한 젊은 친구의 독자적 발사에 의해 처음 시도되었는데 그는 에어기타라는 아이디어에서 출발하여 손동작으로만 기타를 연주할 수 있는 독특한 발상으로 그의 친구인 짐머맨 에게 특수장갑을 부탁하여 가상환경을 조작할 수 있는 새로운 기술개발에 힘을 기울인 결과 1988 년에 최초의 통합형 가상현실 시스템인 R B2 Reality Built for 2 가 상업용 시제품으로 발표되면서 전세계적으로 가상 현실 붐이 일어나게 되었다. 바로 이 회사의 사장인 재론 레니어가 가상현실이란 용어를 만든 장본인이다. 이 용어가 등장한 시기는 1989 년으로 처음 일반에게 주목받게 되었던 것이다. 최근 들어서는 인공현실 Artificial Reality, 가상환경 Virtual Environment, 가상세계기술 Virtual world technology, 혹은 인조두뇌공간 Cyberspace˜이라 불리 우는 세계로 그 범위가 확산되었으며, 이를 구현 가능하게 하는 시스템을 가상현실시스템이라고 했다.
그렇다면 이러한 가상현실의 테크놀러지 영상은 우리에게 어떤 미래를 가져다 줄 수 있는 것인지 살펴보자.
첫째는 컴퓨터 Computer 와의 작업에서 새로운 방식의 작업형태를 만들어 낸다. 모니터를 통해 이미지를 보는 대신 데이터 보안경 Data Goggles, 또는 머리에 쓰면서 보는 Head mounted display 것으로, 키보드를 치는 대신 데이터 장갑을 이용하여 가상현실 공간 속으로 움직일 수 있다. 지금까지는 눈으로 인지할 수 없는 원자 조각들과 초음파 X-레이 등 같은 특수한 영상세계도 형태를 보고 체험 할 수 있게 되었다. 둘째, 인간과 인간사이의 커뮤니케이션 Communication 방법에 새로운 장을 열어 놓았다. 텔레버쥬얼리티 Televirtuality 는 비디오컨퍼런스 개념에서 확장된 개념으로 컴퓨터로 만들어진 스튜디오에서 서로 대화를 나눌 수 있게 해 준다. 이는 인간 상호관계 Human interaction 에 도움을 주는 새로운 기능성을 제공하며 전화기나 화상전화, 화상회의 수준을 넘어 새로운 방식의 테크놀로지영상을 보이는 시대를 열어준다. 셋째로 가상현실은 극도의 복수매체 複數媒體˜이다. 상호작용 멀티미디어 컴퓨터프로그램은 데이터베이스 사이에 상호연결성 Interface 을 주기 위해 비디오와 오디오 테크놀러지를 함께 사용하고 있다. 예를 들면 일본의 마쓰 시다 회사는 컴퓨터로 만들어진 환경 속에 그 회사에서 제작한 부엌용 전자제품을 고객의 의지대로 선택하여 가상부엌공간을 배치하여 부엌의 공간을 구상하고 체험하도록 해준다. 넷째로는 가상현실을 활용한 새로운 시도로서의 예술분야가 나타난다. 최근에 소개된 'Virtual reality-maker VRM' 라는 소프트웨어는 개인용 컴퓨터에 데이터 옷 data suit 과 데이터 안경을 사용하여 개인 가상체험을 실현시켜주었다. 이 프로그램은 아티스트 자신의 페인트 작품과 드로잉을 가상공간에서 가능하게 해주고, 과거에는 존재하지도 정의되지도 않았던 새로운 창작물로서의 실험도 가능하게 되었다. 이제 가상현실은 사이버스페이스 Cyberspace 에서 이루어지는 새로운 예술소통의 형태로 될 것이고 컴퓨터는 그것을 이미지로의 작업하게 될 것이다. 인간은 실제로 반응하는 빛의 세계에 살고 있으며, 물체에서 발생하는 소리의 신호를 받아들여 감각기관을 통해 인간에게 전달하기 때문에 자신의 환경을 인식 認識˜하는 것으로 살아있음을 알게 된다. 따라서 가상공간에서의 테크놀러지는 이러한 공간의 물체에 대한 인식을 빛과 소리의 반사등으로 신호화하여 임의로
생성시켜 마치 가상환경이 존재하는 듯한 감각을 받게 한다는 원리에 소리, 힘, 온도, 냄새 등의 감각정보를 합성할 수 있다면 최고의 테크놀러지의 실제적 동일성을 감지하는 것이다. 이것은 영상정보기술이 발달되어 멀티미디어영상으로 특화 되는 현상일 것이다. 이는 완전한 가상 현실적 영상의 재현을 요구하는 인간의 노력에 새로운 세대는 또 다른 빛의 홀로무브먼트의 아우라를 발견하게 될 것으로 본다.
2. 디지털 모션캡쳐의 특수영상
18 세기말 Marey 와 Muybridge 등의 몇몇 사람들이 사진을 이용하여 사람의 동작을 분석하고 이를 의학, 군사용으로 사용했던 것으로부터 근대적 의미로는 20 세기의 초 Disney 등에 의하여 사용된 Rotos coping 에 의하여 정립되었다 고 할 수 있다. Rotoscoping 은 실제 연기자가 원하는 동작을 하고 그 인물의 움직임을 그림으로 그려서 2 차원 애니메이션을 생성하는 것을 말한다. 그리고 1993 년 상품화된 모션캡쳐 시스템이 출현하기 이전에는 복잡한 오브젝트 혹은 동작 애니메이션의 제작에 움직임의 주요장면 Key frame 을 수 작업에 의해 생성하고 이들 사이의 중간 장면을 채우는 방식으로 제작되는 키 프레임 애니메이션과, 물리법칙 등 일련의 규칙들에 의해 오브젝트의 움직임을 자동 혹은 반자동적으로 생성하는 동작제어 Motion Contral 기술에 의한 방법을 사용하였다. 그러나 키 프레임에 의한 방법은 시간적 비용이 많이 드는 단점이 있으며, 동작제어기술에 의한 방법은 계산비용이 크고 인체의 운동과 같이 동작이 주체가 되어 자발적으로 운동하는 경우에는 부적합하다. 또한 두 방법 모두 실제와 구분할 수 없을 정도의 정교한 애니메이션의 제작은 불가능에 가깝다. 모션 갭쳐에 의하여 오브젝트의 위치와 동작을 캡쳐하고, 이 데이터를 컴퓨터에 의해서 제작된 3 차원 모델에 맵핑시켜 캐릭터의 움지임을 생성하는 새로운 애니메이션 제작방법은 기존의 방법의 단점을 극복할 수 있는 대안으로 평가되고 있고, 특히 동작의 사실성 면에서 매우 우수한 애니메이션의 제작이 가능하다. 요즈음 TV 의 가상 캐릭터인물과 스튜디오의 영상은 VR 과 함께 모션캡쳐 장비로 만든 움직이는 캐릭터를 배우 없이도 방송에 내 보내어지고 있다. 얼마전 중화영웅의 스턴트맨의 연기 없이도 주인공이 자신이 Full Body 모션캡쳐장비를 입고서 옥상의 꼭대기에서 무술을 보여주면서 또한 미국에서의 자유의 여신상을 날라 다니는 가상현실의 영화를 보여주는 기술까지 발전했다. 그리고 이 기술들은 현재 순수한 만화 애니메이션의 Toy Story 등과 같은 3 차원 애니메이션의 캐릭터의 동작 생성뿐만이 아니라 ˜ 터미네이터 2,˜ 고지라 ˜ 등과 같은 특수영상효과에도 사용되어져 유용성이 입증이 되었다 .또한 게임소프트웨어인 Virtual Fighter, FIFA99 등과 같은 캐릭터의 연기자동작을 그대로 3 차원 캐릭터 시켜 재현할 수 있게 되었으며 3 차원게임 등에 새로운 장을 열었다. 모션캡쳐의 우수성은 영화, 애니메이션 , T V 방송국의 스튜디오와 가상캐릭터, 3D 등에 3 차원 캐릭터의 자연스러운 동작생성을 줄 뿐 만이 아니라, 가상공간에서의 사용자 인터페이스용, 로봇원격제어 4D, 인간공학에서의 관절 가동영역 측정, Dummy 로봇을 이용한 충돌실험, 생물역학, 스포츠 과학 등의 분야에까지도 매우 유용하게 사용되어지고 있다. 이제는 실제의 배우 몸에 자력이나 광학 감지기를 정착하면 배우의 몸짓이나 표정이 3 차원 데이터 셋 공간 좌표인 X, Y, Z 축 으로 옮겨져 이 데이터 셋을 이용해 배우들이 서로 반응하는 행동도 캡쳐할 수 있고 실시간으로 여러 캐릭터들의 행동을 만들 수 있다.
실시간의 모션 캡쳐는 TV 방송과 블루스크린을 통해 살아있는 애니메이션을 전달할 수도 있고, TV 연속극을 위해 1 회 방송분 당 생산비를 절감할 수 있다. 모션 캡쳐의 지지자들은 오늘날 이 기능의 효과를 알고 있는 이들의 면밀한 검토를 거치면 인간과 동물의 미묘한 움직임이라도 받아둘 수 있는 장비라고 주장하고, 반면에 반대자들은 이 Data 에서 얻어진 장면이 아무리 이음새 없도록 조작을 했다고 해도 궁극적으로 더 좋은 결과를 얻기 위해 10 배의 시간을 더 들여야 한다는 주장이다.
새로 선보인 'Sesame Street 라는 방송극 중 "Elmo 의 세계"라는 단편을 제작한 Curious Pictures 라는 프로덕션은 현실적 요소 인형, 배우, 동물 를 애니메이션과 섞기 위하여 실시간 시스템인 Typhoon 을 사용했다. 인기리에 방영되는 PBS 방송극의 장면에 Elmo 는 다양한 색깔에 어린이가 2 차원으로 그린 놀이 방에 있다. 갑자기 그 속에 그려진 여러 요소들 중 화가가 튀어나오고 천장 문이 열리 듯 Elmo 와 상호관계를 통해 움직이기 시작한다. 이 애니메이션은 제어장비로 혁신적인 MIDI Sliders 를 사용하는 Typhone 으로 Curious Picture 는 각각 10 분에서 15 분 짜리 한 편을 완성할 수 있었다.
실시간 렌더링은 Typoon 의 강점으로 이스라엘의 Herzliva Pituach 에 있는 실시간 애니메이션 제작 시스템인 Dream Tearm˜ 서드 파티 모션 캡쳐 하드웨어를 지원한다.˜의 마아케팅 매니저인 Rafael Marmor 의 Typhoon 에서 높은 질의 포스트 렌더링을 하는 3D 모델링 패키지로 보냈다. 실시간 작업은 모두 렌더링에 관한 것이다. 모션 캡쳐 하드웨어가 얼마나 편리하게 사용이 되고 통합이 되는지 보기 위해서는 강력한 렌더링 엔진이 필요하다. 또한 초당 프레임 수에서 얼마나 빨리 많은 폴리곤을 소프트웨어에서 실시간으로 처리할 수 있는지를 신경 써야 할 것이라고 이야기하고 툴 이 포함된 실시간 제작시스템이 Kaydara 의 Filmbox 이다. 라는 것이다. 모션 캡쳐 하드웨어와 3D 애니메이션 소프트웨어 사이의 교량적 위치를 점한 Kaydara 는 더 좋은 결과물을 위해 가장 많이 사용하는 두 가지 유형의 모션 캡쳐방식의 연관된 다음의 문제를 해결할 수 있다.
첫째는 마그네틱 Magnetic tyoe tracker: 자력입력기 ˜ 방식으로 센스와 수신기 receiver 의 배열이 실제 배우의 몸에 부착되어 움직임에서 나타나는 자력을 재는 방법이다. 이 방법은 만약 다른 자력 물질 Magnetic object 이 캡쳐 지역 가까이 에 있으면 잡음이 발생하는 잡음과 떨림을 제거하여 애니메이션을 고르는 필터를 제공한다.
두 번째는 옵티컬 Optical type Tracker: 광학형 입력기 로 고해상도 디지털30˜ 카메라와 실제 배우의 몸에 부착된 및 반사 감지기 reflective markers 사이의 빛 감지를 통해 작동한다. 하지만 감지기가 가려지면 '폐색 occlusion 이라는 문제가 발생하는데 이는 여러 데이터를 폐색 동안 잃어버리게 되는 것이다. 그러나 Film box 는 잃어버린 자료를 추가하고 재구성할 수 있다. 모션 캡쳐의 과정에서 Film Box SGI 또는 윈도우 NT 워크스테이션 는 3D Animation 프로그램 환경에서 얻어진 3 차원 캐릭터를 가지고 작업한다. 모션 데이터가 최적화 되고 3D 모델에 붙여지고 다시 3D Animation Software 3D Max, 마야 등 로 보내진다. 그리고 모션 캡쳐 장비의 사용자들은 시간 소모를 줄이고 비용 적인 이유로 보여주거나 가려야 하는 일없이 어디서나 실제와 같은 조작을 할 수 있는 시스템을 원하며, 주위의 산만한 잡음 제거의 기능이 효과를 감소시킨다고 느끼고 있다.
이 장비를 선보인 업체인 Puppet Works 는 진부한 아날로그방식이 아닌 완벽한 디지털체계를 사용한다. 실제의 배우 디지털 모션 캡쳐용 옷 위에 매우 민감하고 정확한 옵티컬 광선 엔코더를 사용하는 Puppet Works 는 잡음이 없고 붕 뜨는 일이 없는 데이터를 동시에 여러 배우에게 캡쳐할 수 있다. 그러므로 캡쳐 후에 편집이나 잡음 雜音˜제거는 필요하지 않다. 캐릭터 옷과 SGI 나 NT 환경을 연결시켜 주는 Interface Box 는 60Hz 의 샘플링 속 초당 60 프레임 로 계속되는 움직임을 7 분까지 캡 쳐할 수 있다. NFL National Foot ball League 을 위해 제작된 애니메이션 중심의 진보된 특수영상이 NFL Made Easy 에 대해 애니메이션 회사들이 이를 전통적인 키 프레임으로 제작하기에는 6 달에 6 명의 인력이 필요하지만, 이것으로는 약 25 일만을 요구하였다. Bee vision 에 들어가면 Toronto 에 있는 Puppet 의 모션 캡쳐 서비스 국은 31 개의 다른 장면에 5 명의 실제 배우의 움직임을 6 개월 대신 약 21 일로 작업하였다.
마그네틱 방식보다도 옵티컬 방식을 더 믿는 이유는 전선이나 부착 장비처럼 배우의 행동이 방해받지 않기 때문이다. '99 SIG GRAPH 에서 Vicon 사는 신형 Vicon 8RT 가 실시간 정확한 데이터를 읽어들이기 위해 실시간을 지원하는 개량된 프로그램이 선보였다. 즉 Vicon 8RT 는 인간의 행동의 성질에 대한 근본적인 이해를 데이터로 내포하고 있다. 24 대의 카메라 각각으로부터 전해오는 2 차원 영상을 각각 분석하기 위해 뼈대내의 움직임의 영역을 정하고 위치를 계산하기 위해 "leaming" 기능을 사용한다. 이는 마커가 가려지면 뼈가 멈추어지듯이 인간 움직임을 알고 있기 때문에 뼈대가 사라지거나 장면을 건너뛰지 않는다는 의미이다. 즉 사이보그31˜ 를 만들 수 있고 실시간의 장비 중 이 같은 강력함은 어느 다른 장비보다도 앞선 것이다 .그리고 Vicon 8RT 가 모션 캡쳐 작업을 하는 방식에 어떤 변화를 줄 것으로 기대를 하는 것은 특수효과의 첨단하드웨어로서의 디지털이미지를 고가 워크스테이션장비에서 저가용 워크스테이션 컴퓨터에도 활용되는 소프트웨어의 개발과 디스플레이 영상인 것으로 첨단 입출력장비가 태어났던 것이다. 최근 이 장비로 사용한 영화로서는 스타워즈 에피소드 I˜ 과 Mummy 와 ˜ 타이타닉 ˜ 그리고 Borrowers˜ 이다.
모션 캡쳐와 키 프레임 작업을 알고 보면 Scully 는 두 방식을 함께 쓰면 많은 3D 애니메이션 작업이 효과적이라고 한다. 파리의 애니메이션 회사인 Medialav 의 경우를 들면, Scully 는 30%의 키프레임 작업과 70%의 모션 캡쳐작업으로 '돈키콩 Donkey Kong' 의 작업과정에서의 분당 애니메이션 비용을 엄청나게 줄여 작업하였다고 한다. 인기있는 닌텐도의 게임시리즈 중에서 따올 Donkey Kong Country 는 Fox 가족 방송에서 최고의 방영율을 기록한 일일극이다. Motion Star 는 Medialab 이 보유한 캐릭터 렌더링 소프트웨어인 Clovis PA 와 함께 사용했다.
그들의 Star Trak 무선 일체형 모션 캡쳐 시스템에서 Polhemus 는 교류 자기를 발생하는 전자력선으로 만들어진 FR 송신과 수신기를 사용한다. 데이터는 궁극적으로 두 전달 경로 channels˜를 제공하는 16 DSP 보드를 내장한 묘션 캡쳐 서버에 저장이 된다. 이 장비는 초당 60 배의 향상된 속도에서 실시간으로 32 개의 개별 수신기의 신호를 읽어 들일 수 있다. Star Trak 은 300 평방 피트 범위의 행동 영역 내에서 여러 배우들의 행동을 읽을 수 있는 것이다.
LIFE source 의 모션 캡쳐 시스템을 설계함에 있어 DnA 는 정밀함, 범용성 그리고 쉬운 사용을 준비해 왔다. 순간적 측정 Instant Calibration 은 완벽함, 정밀함과 얼굴, 몸과 손에 대한 조정기능을 제공한다. 순간적인 캐릭터 변환 Instant Character Selection 은 실제 배우들이 계속 움직이는 동안 마우스를 움직이고 누르는 것만으로 한 캐릭터에서 다른 캐릭터로 바꿀 수 있게 한다. 그리고 적응력 있는 라니브 필터 live filter 는 최상의 모션 데이터의 질을 나타내기 위해 재입력과 움직임 곡선 편집을 가능하게 한다. 이것의 남다른 관점은 각각의 최상으로 만들어진 모션캡쳐 기술의 결합이다. 즉 얼굴은 옵티컬로 미묘한 차이를 본뜨는데 가장 좋고, 얼굴은 방해물이 가려질 일이 없기 때문에, 몸 속도를 조율하고 쉽게 사용하기 위해 으로 그리고 손에는 저항성 있는 resistive˜ 감지기 장갑 기술이다. Scene Genie 는 2 차원 비디오에서 3 차원 장면 빛, 색깔이나 모션 캡쳐를 위한 물체의 위치와 효과 을 조화시킨다. 3D 스튜디오 맥스의 플러그인으로 선보인 Scene Genie 는 3D 스튜디오 맥스를 영화와 비디오에서 보이지 않는 모델링과 애니메이션 그리고 모션 캡쳐, 인형제작, 세련된 공정과 스스로 반응하는 애니메이션 등 실제 행동을 위한 강력한 툴로 만들어 주었다.
모션캡쳐와 3D CG 와의 관계는 소프트웨어의 개발로 연결의 고리를 형성하고 있다. 즉 1999 년 초 한국전자통신연구원32˜ 내의 VR 센터 설립과 지난 7 월 2 일 30 억원을 투자힌 게임지원종합진흥센터의 출현 등 문화산업 진흥의 일원으로 CG 관련 산업에 대한 정부의 대대적인 지원은 고무할 조건이나, 어떻게 이러한 정부에 힘입어 관련업체와 전문인사들의 생생한 자료로서 그에 대한 가치와 활용 분야를 간략하게 예측하고자 한다. 모션캡쳐는 결코 어려운 이론과 기술이 아닌 응용이 가능한 소프트웨어이자 특수영상의 한 분야로 자리매김을 할 것이라고 본다.
현재 대전에 위치한 이 연구소는 여러대의 적외선 카메라를 이동시켜 움직이는 물체의 3 차원 동작 정보를 수집 및 분석하여 가상 캐릭터에 자연스러운 움직임을 부여하는 모션캡쳐 시스템과 가상공간 내에 특수효과를 생성하기 위해 컴퓨터 제어로 운용되는 카메라시스템인 모션컨트롤 카메라, 가상현실감을 느낄 수 있는 체감형 탑승시스템인 모션베이스 시스템, 그리고 PC 를 기반으로 물체의 3 차원 정보를 추출하는 3 차원 스캐너 등 가상현실의 핵심기술 개발에 필요한 최첨단 가상현실 연구장비를 갖추고 있다.
이 연구소의 주요연구분야는 시각, 청각, 촉각을 통해 현실감을 제시하기 위한 기반 기술인 몰입형 영상 제시기술, 임장감 음향 제시 기술, 촉감 각 제시 기술을 개발하고 있으며, 이와함께 3 차원 가상공간을 쉽게 만들 수 있는 가상공간 구축도구와 병행하여 디지털컨텐트 제작 기술을 개발하고 있다. 또한 가상공간을 보다 현실감있게 표현하기 위하여 실물로부터 3차원 모델을 직접 만들 수 있는 기술, 실사와 가상공간을 혼합하는 Mixed Reality 기술 및 가상공간상에서 물체의 원색 재현을 위한 컬러일치기술을 주도해 나갈 핵심 기술들을 개발하고 있다.
디즈니사의 장편만화인 백설공주의 기법은 최근 10 년사이에 전용으로 개발된 장비의 도움없이도 오래전부터 존재한 애니메이션 기법 중 하나로 악마의 Rotoscope 라고 불리운 모션캡쳐 기법을 활용했었다. 간단히 말하자면 사람의 움직임을 애니메이션 속으로 전달하는 기법으로, 애니메이션은 원래의 과장과 애니메이터의 손으로 터치한 가치와 표현을 쓰고 있었는데 디즈니사에서도 이러한 과정이 자연스레이 멀어지는 것이 요즈음의 과정이었다. 즉 모션캡쳐기법은 Fiction 이 아닌 현실성과 정확성을 필요로 하는 프로젝트에서 꾸준히 그 역할을 해왔다. 근래에 들어와 컴퓨터 애니메이션들이 사람의 움직임을 자연스럽게 집어넣는 방법으로서 이 장비를 사용하는 것이 더 효율적인 작업 방법으로 인정되고 있다. 애니메이션에 있어서도 감독 또는 연출가 밑에 스크립트와 콘티가 있는 것이며 이것을 보조하기 위해 가장 효율적이고 최종 작업물의 완성도가 향상될 수 있는 기법만이 필요한 것이다. 또 근래에는 장비를 창의적으로 활용하여 꼭 사실적인 움직임 외에도 사용을 하고 있는 것은 영화의 특수영상효과로 쓰인 ˜ 중화영웅 ˜ 에 스텐트맨의 위험도를 줄이는 액션으로도 사용된 것이다. 그리고 이 장비의 역할이 가장 두드러지게 사용된 것은 비츄얼 피이터 란 게임이라고 본다. 또 국내의 헤아릴 수 없이 많은 컴퓨터 애니메이션 업체에서 수많은 작업자들이 키보드와 마우스 앞에서 밤을 지새고 있는데 모션캡쳐 장비들의 주 개발사들이 있는 외국에서 그곳에 있는 업체들이 자기들의 편리한 이점을 활용하여 이 프로젝트 저 프로젝트를 적절하게 모션캡쳐장비를 사용하여 우수한 질의 작품을 만들어 인정을 받는 계기가 된다면 우리의 미래를 더욱 개척하기 쉬울 것이다. 사실 현재 국내에 진행중인 3D 애니메이션 프로젝트는 상당히 많은데, 이중 별로 이 장비를 사용하지 못하고 있으며 전문가의 배출도 필요하고 장비의 고가로 소수의 사용뿐인 것을 알고 있다. 언제인가부터 사이버캐릭터와 첫 사이버가수인 일본의 다데 교코 가 모션캡쳐기법을 통해 태어난지 수년 후 국내에서도 이 장비를 사용하여 만들어진 사이버 가수 '아담'이 나오고, '사이다'와 '류시아' 등이 나온 점을 생각할 때 국내의 젊은 인력들이 애니메이션 기법 중 하나로서 모션캡쳐기법에 어느나라보다도 어느업체보다도 뒤지지 않게 연구해야할 때라고 본다.
현재 모션캡쳐장비는 사람을 비롯한 움직이는 사물의 동작을 컴퓨터상의 Data 로 만들어주는 장비이다. 이 장비에는 여러종류가 있는데 그중 대표적인 것이 사람의 뼈와 관절이 있는 대상의 팔다리와 몸, 목 등의 흔히 Skeleton 의 움직임을 데이터화시켜주는 것으로, 이 장비를 스포츠, 의학, 교육 등에도 현재 활용하고 있으며 현실에서와 유사한 동작을 만들어 내기 위함 외에도 프로젝트의 진행속도를 가속화시켜주기 위한 용도로 개발되며 사용되고 있다.
˜ 베트맨과 로빈 ˜ 이라는 영화에서 보면 배트맨이 빌딩 위에서 뛰어내리는 장면이 있다. 전에는 이러한 장면을 진짜 배우대신 스턴트맨이 연기를 하고 여기에 실제배우가 망토를 걸친 진짜배우를 마지막 얼굴로 눈속임을 하였는데, 이제는 망토 도 없이 뛰어내리는 사람의 모습을 이 장비로 Digital Data 화 시킨 후 망토는 Simulation 시켰다. 최종적으로 망토를 걸친 배트맨은 컴퓨터에 의해 만들어지고 영화에 모습을 보인 것이다. 이제 많은 영화에도 이 장비를 여러모로 사용하고 게임제작에도 매우 적극적으로 활용되고 있다.
그리고 엔터테이먼트 게임 역시 이 모션캡쳐의 대중화로 인한 영상산업이 되었고 몰입형 게임의 콘트롤러로서 ˜ 아비타 ˜ 라고 불리우는 대리자에게 동작을 심어주는 도구로 쓰일 것이다. 이를 통해서 유명인이 수많은 사람들과 쉽게 악수를 하거나 운동도 같이 할 수 있을 것이다. 컴퓨터 채팅의 발달로 사이버 공간에서 단순한 바디모션이 그대로 입력 인식되어지는 것에서 한단계 다른 정식 바디모션이 인식되어 미래에는 컴퓨터가 정말로 사람의 감정과 Feel 을 전달시키는 단일방향성이 아닌 feedback 시스템이 추가되어 더욱 발전될 것으로 본다.
이러한 최근의 모션 캡쳐33˜기술이 몇몇 애니메이터들은 가치있는 형태라고 생각하지 않을 수도 있겠지만 요즈음은 영화, 광고영상, TV 영상, 비디오 게임에 널리 사용되고 있으며, 첨단 영상 효과 매체로의 발전은 지속적일 것이다. 그리고 모션캡쳐시스템은 사이버 스턴트맨, 사이버 배우 같은 새로운 디지탈 개념 형성에 지대한 기술적 영향력을 행사하면서 행동 및 표정의 캡쳐를 극대화시키는 쪽으로 모든 역량을 집중해 나가리라 예측된다.