창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한...

37
보안과제 일반과제 ( ), ( o ) R2011100010-0003 첨단융복합콘텐츠기술개발 문화부 ( ) 창작뮤지컬 투란도트 의 창조적 연출효과 극대화를 위한 ' ' 지능형무대공연 기술 주 바이널 ( ) 한국콘텐츠진흥원

Upload: others

Post on 25-Oct-2020

2 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

보안과 과 ( ), ( o ) R2011100010-0003

첨단 복합 개 부( )

작뮤지컬 란도트 조 연출효과 극 를 ' '

지능 공연

주 이( )

국 진 원

Page 2: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

문화체육관광부장관 귀하

본 보고서를 ‘2011년도 글로벌프로젝트 기술개발사업’

창작뮤지컬 투란도트 의 창조적 연출효과 극대화를 위한 지능형 무대공연 기술‘ ’

과제의 보고서로 제출합니다.

년 월 일 2012 7 9

주관연구기관명 주 바이널 직인: ( ) ( )

주관연구책임자: 조 홍 래 직인( )

공동연구기관명: 숭실대학교 산학협력단 직인 ( )

사 대구뮤지컬페스티벌( ) 직인 ( )

재 대구디지털산업진흥원 직인( ) ( )

공동연구책임자: 김 동 호 직인 ( )

곽 종 규 직인 ( )

김 정 훈 직인( )

문화체육관광 연구개발사업의 관리 등에 관한 규정 제 조 연구개발결과 공개 등 에29 ( )

따라 보고서 공개에 동의합니다.

Page 3: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 2 -

과제개요 1. ··················································································································································· 1

자체평가 의견2. ··········································································································································· 2

당해연도 연구개발 수행실적3. ················································································································· 3

가 연구목표 달성도 . ······························································································································· 3

나 평가항목 달성여부 . ························································································································· 18

프로젝트 총괄현황 및 수행실적4. ········································································································ 19

세부 연구개발내용 및 결과5. ················································································································ 21

붙임 정량적 실적 및 우수사례[ 1] ············································································································ 32

붙임 구매금액이 천만원 이상인 연구시설장비 구매 및 관리 현황[ 2] 3 ․ ········································· 34

Page 4: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 1 -

과제개요1.

가 과제정보 .

과 제 명창작뮤지컬 투란도트 의 창조적 연출효과 극대화를 위한' '

지능형 무대공연 기술 차년도(1 )

주관연구기관명 주 바이널( ) 연구책임자 조 홍 래

공동연구기관명 숭실대학교 산학협력단 사 대구뮤지컬페스티벌 재 대구디지털산업진흥원, ( ) , ( )

총 연구기간 2011.11.1. ~ 2014.3.31 당해연도 연구기간 2011.11.1. ~ 2012.5.31

당해연도 연구비 천원 정부지원금 천원 사업자부담금 천원 854 ( : 640 , : 214 )

총 연구비 천원 정부지원금 천원 사업자부담금 천원 2,722 ( : 2,040 , : 682 )

나 과제요약 .

프로젝트 개요 1)

프로젝트 콘텐츠 개요 설명( ) ( ) 프로젝트 콘텐츠 개요 그림( ) ( )

- 형 식 뮤지컬:

- 장 르 하이테크놀로지 뮤지컬:

메인 제작사 - 주 바이널 사 대구뮤지컬페스티벌: ( ) /( )

순 - 제작비 : 억 원80

- 제작완료시기 : 년 상반기 예정2014

해외진출 - 시기 : 년 월2014 3

해외매출목표 - : 107억 원

- 제작참여 핵심인력 : 박현순 집행위원장( ), 유

희성 연출 이해제 대본 가사 장소영 작곡 편( ), ( / ), ( /

곡 음악감독 오재익 안무 서숙진 무대디자/ ), ( ), (

인 민경수 조명디자인 권도경 음향디자인), ( ), ( ),

한정인 의상디자인 김미경 기술감독( ), ( )

연구개발 개요 2)

연구개발 개요 o

연구개발 목표 뮤지컬 투란도트를 위한 관객 몰입을 유도하는 지능형 공연기술을 개발- :

연구개발 내용 첨단영상 및 통합제어 솔루션을 적용한 인텔리전트 스킨 기술 개발을 통해 창작뮤지컬 - :

투란도트의 공연연출 효과를 극대화시켜 해외 유수의 뮤지컬들과 차별화

뮤지컬 무대에 최적화된 프로젝션 맵핑 기술 을 적용하여 Intelligent Space : 3D (Virtual Space Mappng)∘무대 위에서 연기하는 배우와 공간의 디지털 영상이 실시간 인터렉션 을 (Location & Motion Tracking)

통해 자유자재로 연출

배우의 무대의상에 웨어러블 컴퓨팅 기술을 적용하여 모터 레이져 프로젝션Intelligent Dress : , LED, , , ∘각종 센서 등의 피지컬 요소를 통해 의상의 형태 및 표면의 이미지가 다양하게 변화

인텔리전트 스킨을 통해 실현하여 컨텐츠 제작 및 물류 비용이 절감됨One Source Multi Use ∘연구개발 개요 이미지 o ( )

Page 5: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 2 -

자체평가 의견2.

구분 내용

과제수행목표의 달성

여부 및 정도

당초 목표했던 과제수행목표를 모두 달성하였으며 연구개발 목표에 따른

기술개발이 충실히 진행되었음.

과제수행결과의

질적수준

공연제작 스탭진의 자체평가결과 기술 개발 자체의 완성도 및 질적 수준은

우수하나 차년도 공연에는 개발기술중 일부분이 적용되었음1 .

차년도에 제작되는 공연에는 차년도 개발기술의 대부분을 적용할 계획이2 1

며 차년도에는 기술 개발과 콘텐츠 제작 사이의 원활한 피드백이 이루어질

것으로 예상됨

목표달성 차원의

애로요인

짧은 차년도 수행기간 내에 연출진과의 원활한 커뮤니케이션이 이뤄지지 1

못해 기술개발 방향 설정 및 실제 공연에 적용 가능한 세부 개발내용을 협

의하는데 어려움이 많았으며 이는 기술개발완료 및 테스트베드 기술시연평

가의 일정이 늦춰지는 요소로 작용되었음.

과제수행결과의 활용방안

사업화 추진 관점( )

당해년도에 개발한 인텔리전트 스페이스 및 인텔리전트 드레스의 차년도 1

결과물은 차년도부터 중국 및 국내 공연을 위해 본격적인 테스트 및 적용 2

단계를 통해 활용될 계획임.

장기적으로는 기존에 존재하지 않았던 뮤지컬을 위한 지능형 무대공연기술

의 국산화 및 다른 공연 산업에도 활용될 수 있을 것으로 기대됨.

자체평가 결과 아주우수 □ ■ 우수 보통 미흡 아주미흡 □ □ □

Page 6: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 3 -

3. 당해연도 연구개발 수행실적

가 연구목표 달성도 .

연구개발 목표

계획 실적

연구개발 내용 가시적 결과물 연구기간연구비백만원( )

연구수행기관

달성도(%)

수행내용 및 수행실적 결과물( )

인텔리전트

스페이스 개발

다중 프로젝션의 1-1. 콘텐츠 중앙컨트롤 기술 개발

다중 콘텐츠 소스 관리 및

재생가능 프로그램 /

매뉴얼

11.11~12.05

170 주 바이널( ) 100% 다중 영상 콘텐츠 재생을 위한 기본 인프라 설계1.

그림 다중 프로젝션 영상 콘텐츠 재생 하드웨어 시스템 설계도 < 01>

하드웨어 최적화를 위한 워크스테이션 모듈화 ․운영 및 로컬 워크스테이션으로 나누어 다중콘텐츠 재생 및 다중 프로젝션을 - CMS

구성

기본 대의 다중 프로젝션 기능으로 뮤지컬 공연에 최적화된 시스템으로 구성 - 4

인터랙티브 센싱 다중콘텐츠 재생 엣지블렌딩 지오메트릭 캘리브레이션의 / / , ․통합제어 및 서버 대수의 추가가 용이하도록 설계

다중 프로젝션 구현을 위한 고용량 콘텐츠 데이터의 실시간 처리기술 분석을 통한 ․무대장치 인프라 설계 및 최적화 시스템 구성 완료

다중 프로젝션을 ․통한 영상 콘텐츠 재생 하드웨어 최적화 기술 개발

11.11~12.03

70

다중 프로젝터 제어 ․를 위한 콘텐츠 중앙 콘트롤 시스템 (CMS) 개발

12.02~12.05

100

Page 7: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 4 -

소프트웨어 개발 2. CMS

하이테크놀로지 뮤지컬에 최적화된 다중 프로젝션 제어용 의 주요기능 도출 완료 CMS․도출된 기능을 단계로 구분하여 체계적인 개발을 위한 로드맵 완성 3․

단계 다중소스 실시간 영상 제어 비디오 트랜지션 씬별 배치 및 관리 다중 - 1 : , , ,

프로젝션 정렬 좌표 수정 및 회전,

단계 지오메트릭 캘리브레이션 결합 엣지블렌딩 결합 공연장 맞춤형 유저페이스 - 2 : , ,

고도화

단계 색상 및 감마보정 다중 프로젝터 모니터링 무선센서 통신 연동 데이 - 3 : , , , RTLS

터 소프트웨어 연동

단계 로드맵에 기반하여 소프트웨어 개발 완료 및 매뉴얼 작업 완료 1 CMS ․연출진 협의결과 공연 셋업시 대응 및 실제 뮤지컬 공연시 운용을 위한 필요기능이 추 ․가적으로 발생 차년도에 메뉴 디자인 및 인터페이스 연동 추가기능을 포함한 개발 고,

도화 결정

의 주요 차별화 기능3. CMS

뮤지컬 공연에 최적화된 맞춤형 설계 ․타임라인 방식의 미리보기 시스템과 시스템을 결합 실제공연 운용시 효율성이 높 - Q ,

공연 에 최적화된 편리한 구조로 영상 셋업시 세팅 시간 최소화 Cue System․운용 서버의 소스폴더 하이어라키를 프로그램에 직접 삽입 소스의 수정 및 업 - CMS ,

로드가 잦은 공연 셋업시의 작업시간을 단축

영상을 재생하는데 사용할 외에 공연에 적용중인 조명 사운드 무대 를 사 - Cue , , Cue

용자가 지정하여 섬세한 의 관리 및 운영 가능Cue

다중 프로젝션 지1-2. 오메트릭 캘리브레이션 및 심리스

콘텐츠 (Seamless)재생 기술 개발

다중 콘텐츠 차원 공간매핑 3및 엣지블렌딩

프로그램 / 매뉴얼

11.11~12.05

195 주 바이널( ) 100% 를 이용한 입체면 엣지블렌딩 소프트웨어 개발1. WPF

다중 프로젝션 소프 ․트웨어 엣지블렌딩 기술개발

11.11~12.03

90

차원 입체표면 프로 3․젝션을 위한 콘텐츠 지오메트릭 조작 기술 개발

12.02~12.05

105

Page 8: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 5 -

그림 차원 공간매핑 및 엣지블렌딩 프로그램 시스템 구성< 01> 3

기 개발한 엣지블렌딩 및 지오메트릭 캘리브레이션 기능을 통합한 소프트웨어의 ․개발을 완료하여 가변적 표피에 심리스하면서도 프로젝션 맵핑 효과를 동시에 적용할

수 있는 기술적 환경 구축

와의 연동을 고려한 시스템 추가 기획 및 고도화계획 완료 CMS․별도의 서버에서 대의 프로젝터를 제어하는 방식으로 차후에 댓수가 늘어나도 운용 - 4

가능하도록 설계 및 개발 차년도에서는 와 연동 및 결합될 수 있도록 설계, CMS

입체면 스크린 미니어처를 통한 현장 테스트2.

․ 지오메트릭 조작 소프트웨어 및 입체면 프로젝션의 연계성을 고려하여 평면이 아닌

입체면을 구성하고 두 면이 만나는 교차지점의 시작점에서 투명도가 감소하는

엣지블렌딩을 구현

영상의 교차면 손실범위 분석결과 차년도의 연구개발목표치인 달성 1 20% ․

그림 차원 공간매핑 및 엣지블렌딩 테스트< 02> 3

차원 공간맵핑 및 엣지블렌딩 소프트웨어의 주요 차별화 기능3. 3

무대 공간 맵핑을 위한 고도화된 지오메트릭 조작 기능 ․실시간 화면뷰를 통해 영상의 축의 좌표를 조절하여 무대 공간 및 오브젝트에 맵핑 x,y․가능

다중프로젝션의 합일화된 영상 콤포지션 상태에서 지오메트릭 조작 가능 ․차후 와 연동하여 프로젝터별로 영상의 다중 레이어 생성 및 레이어별 지오메트릭 CMS․

조작 기능 추가가 가능하도록 개발 차원 입체 공간 맵핑 및 가상공간화 -> 3

콘텐츠와 결합 가능

착시를 주는 영상1-3. 매핑 기술을 통한 평면적 무대공간의 차원 가상공간화 3

기초기술 개발

영상 콘텐츠를 이용한 차원 3가상공간화 프로그램 /

매뉴얼

11.11~12.05

219 주 바이널( ) 100% 디지털 공간 연출을 위한 기술요소 도출1.

착시효과 및 평면 무대의 가상공간화를 위해 적용되어야 할 필수요소 도출 완료 ․스크린간 영상 연계 스크린과 의 영상 연계 및 연동 - , Real-Object

프로젝터 각의 변화에 따른 깊이감을 나타낼 수 있는 영상 컨텐츠의 소실점 - Object

표현

Page 9: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 6 -

공간맵핑을 위한 차 3․원 콘텐츠 테스트 영상 제작

11.11~12.03

160 레이어 구조 및 오브젝트 속도 변화에 따른 깊이감 표현 -

오브젝트와 그림자 프로젝터각과 그림자 및 조명과의 연계성 - ,

물방울 간 계층연구와 콘텐츠 연동을 통한 스크린간 연동 - Object

차원 가상공간화를 위한 콘텐츠 테스트 영상 제작2. 3 3D

실제 공연적용을 고려하여 테스트영상의 컨셉을 투란도트의 물속씬으로 설정 ․입체화된 물속공간을 실제 무대에 맵핑하기 위한 연구 요소 및 내용 도출 ․연구내용을 바탕으로 테스트 영상제작 완료 및 일부 콘텐츠는 공연에 직접 적용함 ․

표 디지털 공간 연출을 위한 연구 요소별 테스트 영상< 01>

무대 미니어처 제작 및 영상맵핑을 통한 실제 공연대비 연출효과 점검3.

차 미니어처 제작 및 테스트 완료 1․리어 바닥면 및 계단형태를 토대로 만든 다각형의 흰 맵핑 오브젝트에 투사 - /

연구

요소

물줄기 지형의

모델링 및 Texture

물결 지형의

모델링 및 Texture물속지형 연구

연구

내용

바닥 지형의 상하 ․를 표현 가능한 Depth

모델링

솟아오름 바닥으로, ․내려앉음 좌우로 ,

흔들림

등의 움직임

표면을 채우는 물결 ․모델링

물결이 점점 채워지는 ․애니메이션

현실감있는 물속 ․지형의

표현을 위한 표면

텍스쳐

테스

영상

평면 입면 기타 요 , , ․소면의 콘텐츠 연동을 통한 디지털 공간 연출기술 개발

12.02~12.05

59

Page 10: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 7 -

실제무대대비 크기의 바닥면 및 리어스크린에 프로젝션을 구성하고 테스트 - 1/15

영상을 맵핑하여 차 테스트베드에 적용1

그림 차 미니어처 테스트영상 맵핑< 01>1

차 미니어처 제작을 통한 연출기술 고도화 및 공연 적용 완료 2․전식작업 포함 크기의 지능형 공연기술 전용 차 무대 미니어처 제작완료 - 1/15 2

배우와 무대의 동선 조명과 영상의 관계 테스트를 통해 개발된 기술을 장소의 - ,

제약없이 항상 테스트 가능한 환경을 구축 디지털 공간연출의 고도화 및 차별화된 ,

콘텐츠를 향후 적용시 중추적인 역할로 활용

차 미니어처 제작 및 차원 콘텐츠 테스트 영상 및 고도화된 공간맵핑 기술을 - 2 3

적용하여 차 테스트베드 수행 완료2

그림 차원 가상공간화 전용 차 미니어처 제작 및 영상 매핑 테스트 < 02> 3 2

Page 11: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 8 -

인텔리전트 드

레스 개발

피지컬 컴퓨팅 기2-1. 술을 이용한 트랜스포밍 드레스 프로토타입 개발

트랜스포밍 드레스

프로토타입매뉴얼/

11.11~12.05

60 숭실대학교

산학협력단

100% 투란도트 뮤지컬에 적용1.

투란도트의 극중 정체성 표현의 극대화 및 변화하는 정체성의 표현을 위한 트랜스포밍 ․드레스 개발

피지컬 컴퓨팅 기술을 옷이라는 매질에 적용함으로써 발생하는 다양한 문제점 무게 ( , ․연결 중력등 을 극복하기 위한 기술적 기법 제시, )

배우의 움직임을 방해하지 않기 위한 움직임의 패턴을 연구함으로써 방향성과 , ․최대각 형태변환의 효율성 등을 고려하여 뮤지컬 투란도트에 적합한 키네틱 구조 ,

매뉴얼 제작 중

차년도 연구개발은 투란도트가 혼령과 이야기를 나누면서 변화하는 정체성의 표현에 1․중점을 둠 기존에는 정체성의 변화를 견장의 탈부착을 통해 표현함으로써 표현의 :

한계를 가져옴

차년도 연구개발은 드레스 자체의 변화에 앞서 견장부분의 변화에 초점을 두고 개발 1 . ․이에 드레스를 와 로 구분하고Body-Encasing Garments Outer Garments ,

차년도에는 즉 견장부분의 변화에 중점을 두고 설계 구현1 Outer Garments, /

그림 견장부분 목깃 어깨 날개부분으로 구분된 구조< 01> : ,

현재 기술과 개선된 기술 비교2.

현재 기술 개선된 기술

모터Wearable Computing Interface( ,

와이어 등 를 이용한 옷의 변형 거의 ) :

모든 구조가 모터의 회전만을 이용하여

변형의 양태를 제한적으로 표현

․ 프레임과 결합된 구조

․ 의상 내부에 변형되는 프레임을 삽입

하여 정확한 형태가 유지되고 커다란 ,

변화가 가능하여 시각적 효과를 극대화

시킬 수 있음 .

․ 모터와 와이어만으로는 표현하기

어려웠던 복잡한 변형이 가능

표 현재 기술과 개선된 기술의 비교< 01>

전신마네킹을 이용하 ․여 인체형태에 적합한 피지컬 하드웨어 설계도명

11.11~12.03

40

배우의 움직임에 ․방해 없이 동작되는 키네틱 구조 매뉴얼

12.01~12.05

20

Page 12: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 9 -

트랜스포밍 드레스의 구조 개념도 분류3.

프레임 접힘 펼침 기법1. /

프레임에 옷감이 부분적으로 부착되어 접힘 펼쳐짐 구현/․반복격자 구조로 디자인하여 단순하고 효율적으로 동작하며 의상의 후면부에 자연, ․스럽게 장식이 숨겨질 수 있는 구조물을 만들어 안정적인 장착이 가능하도록 설계

모터의 회전에 의해 와이어가 프레임을 잡아당기면 레일을 따라 프레임이 접히면, ․서 등 아래쪽으로 자연스럽게 숨겨짐

움직임이 수월하고 공간 활용이 용이하여 목깃 부분의 변형에는 적합하지만 프레, ․임의 접힘 펼쳐짐의 상황에서 옷감의 표면적 넓이의 차이가 극명하여 견장부분으/

로는 사용하기 어려움.

심지 접힘 펼침 기법2. /

심지에 옷감이 직접 부착되어 패턴대로 접힘 펼쳐짐의 방식/․심지 사이에 와이어를 연결하여 모터의 회전을 통해 잡아당기면 심지의 패턴에 따, ․라 주름이 자연스럽게 접히면서 견장이 줄어드는 형태

옷감끼리 겹쳐 움직임이 꼬이는 문제가 발생하지 않으나 옷감이 접힌 상태에서의 , ․부피가 여전 크기 때문에 극적효과가 반감

Page 13: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 10 -

프레임 변형 기법3.

견장의 중앙에 지퍼를 장착하여 견장이 이동할 때 두 개로 갈라지면서 마네킹의 앞․뒤로 자연스럽게 숨겨지는 구조

비교적 구조가 복잡하지만 프레임이 완전히 숨겨질 수 있기 때문에 극적효과가 뛰, ․어나고 견장 부분 제작 시 적합

프레임 심지 결합 기법4. /

부채꼴 모양으로 배치된 프레임 심지에 지퍼와 와이어를 결합하여 모터에 의해 잡/․아당겨지는 힘에 의해 정해진 패턴대로 접혀지면서 등 뒤로 머지 포인트로 숨겨질

수 있도록 구조설계

평소에는 정확한 형태가 유지되고 변형 시에는 자연스러운 접힘을 재현해낼 수 있, ․음

Page 14: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 11 -

표 연구된 제작기법 분류표< 02>

인터랙티브 프로2-2. 젝션 매핑 툴 및 매뉴얼

형태분별 및 인지를 통한 인터랙티브 프로젝션

매핑툴 매뉴얼/

11.11~12.05

64 숭실대학교

산학협력단

100% 프로젝션 맵핑 기술 프로세스1.

키넥트가 배우를 인식하여 데이터를 로 보내면 에서 배우와 아바타를 Unity3D , Unity3D․연동 연동된 아바타의 의상에 변화를 준 후 프로젝터로 배우의 의상에 투사.

그림 형태 구분 인식 툴 프로세스< 01>

투란도트 뮤지컬에 적용2.

장면 선택 혼령과의 대화를 통해 투란도트의 마음이 녹는 장면에서 프로젝션 맵핑 : ․기술을 적용하여 투란도트의 감정 변화를 시각화

콘텐츠 얼음 같던 드레스가 서서히 녹으면서 투란도트의 몸에 온기 핏줄의 시각화 가 : ( )․흐르기 시작

적외선 카메라를 이 ․용한 feature-based 형태 구분 인식 툴

11.11~12.03

34

다중 동시 트래킹 툴 ․개발

12.03~12.05

30

Page 15: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 12 -

그림 흰 드레스에 프로젝션 맵핑 투사 시연< 02>

현존 기술과 개선된 기술 비교3.

표 기술 비교< 01>

현존 기술 개선된 기술

를 이용한 형태 구분 인식 기술Kinect

와 를 이용한 형태 구분 Kinect Unity 3D․인식 툴 개발

에서 제공하는 형태 구분 인식 - Kinect

기술을 와 연동Unity 3D

실시간 사용자 모션 좌표 생성 및 -

콘텐츠 매칭

실시간 인터랙션과 입체적인 영상 ․콘텐츠의 표현 가능

게임에서는 대략적인 위치 데이터만 필

요로 하기 때문에 러프한 데이터를 사

용 이를 부드럽게 연결하기 위해 상대.

적으로 아바타의 반응 속도가 조금씩 느

리며 정교한 자세를 취할 수 없음,

정교한 데이터로의 변환․프로젝션 맵핑으로 배우의 의상에 투 -

사해야 하기 때문에 정확한 데이터가

필요 따라서 보간법으로 데이터를 교.

정해 반응 속도가 빠르면서도 정확한

데이터를 뽑아서 정교한 자세를 취할

수 있도록 수정

기존의 와 는 뮤지컬 투란도SDK OpenNI

트에 적용하기 힘든 점이 있음 번 참(4

조)

둘의 장점을 취합한 를 사용하여 Zigfu․투란도트 뮤지컬에 적합하도록

커스터마이징

Page 16: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 13 -

현재 배포된 기술 비교4. Kinect API

인식 포즈 필요 여부 회전 데이터 제공 여부

SDK X X

OpenNI O O

Zigfu X O

표 기술 비교< 02> Kinect

의 경우 특정한 포즈를 취하지 않아도 사용자 인식이 가능한 반면 사용자 SDK , , ․회전에 대한 처리를 하지 않음

의 경우 사용자의 회전 인식이 가능하고 와 비교해 많은 데이터를 OpenNI , SDK․제공받을 수 있지만 특정한 포즈를 취해야지만 사용자 인식 가능,

따라서 와 의 장점만을 취합한 를 사용함으로써 인식을 위한 포즈를 SDK OpenNI Zigfu․취하지 않으면서도 회전할 때의 데이터를 사용 가능

시범콘텐츠

적용 및

테스트베드

운용

개발 요구사항 3-1.

도출

요구사항

설계서

11.11~12.05

42 DIMF 100% 개발 요구사항 관련 기술팀과 연출진 기술투입 및 공연장 셋업관련 연구 진행 중1.

제 회 동관뮤지컬페스티벌 참가와 기술 개발팀의 공연 관람 및 무대 구도 배우 동 - 3 ,

작 확인 및 연구 진행 중이며 제 회 대구국제뮤지컬페스티벌 참가에 대비한 실질적, 6

인 기술투입 연구 중이며 테스트 배드를 통한 요구사항 설계서 작성,

인텔리전트 스페이스 ․

차년도 기술 적용 계획1연출팀 자문 및 테스트배드 후

변경 기술

하이테크놀로지 뮤지컬에 최적화된 ⦁ 프로젝션과 무대와의 거리 조명장치 등 , ⦁

기술 요구사항 적용 ․요소 개발

Page 17: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 14 -

인텔리전트 드레스 ․

다중 프로젝션 기술과 다중 프로젝터

제어를 위한 콘텐츠 중앙콘트롤 시스

템 개발(CMS)

구조적인 제약과 과도한 프로젝션 사용

으로 공연 몰입에 좋지 않은 영향이 발

생 될 것으로 판단되고 비슷한 사례들이

발생되어 프로젝션 맵핑에 대해서는 작

품의 분위기와 환경에 따라서 제한적으

로 적용함

인터랙티브 센싱 엣지 블렌딩 카메/ / ⦁라기반 맵핑 등의 특화된 기술을 각각

담당하는 워크스테이션을 모듈화하여,

하드웨어의 성능과 안정성 향상 및 확장

성을 높이고 에서는 들어오는 화면CMS

에 대한 세부적인 모니터링 및 관리가

가능한 하드웨어 기본 인프라 설계

차년도 기술 적용 계획1연출팀 자문 및 테스트배드 후

변경 기술

차년도 사업기간동안 의상감독의 자1⦁문을 통해 투란도트의 의상을 연구하

Page 18: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 15 -

투란도트의 내적 변화에 따른 트랜스 포⦁밍 드레스와 살아서 움직이는 듯 사악한

악마의 손을 표현함으로써 캐릭터의 잔

인한 성격이 부각되도록 제작

고 트랜스 포밍 드레스 및 인텔리전

트 드레스를 차년에 걸쳐 완성하고3 ,

죽은 어머니에 대한 복수의 감정까지

첨단 기술로 연출하여 장면과 심적

변화에 따라서 긴장감 있게 표현

등 피지컬 컴퓨LED, Laser, Sensor ⦁팅 기술을 이용(Physical computing)

해 물리적으로 형태가 변화

하는 드레스를 제작(Transform)

배우의 의상에 프로젝션 맵핑을 투사⦁하여 극중 캐릭터의 감정 변화를 시

각화

차 테스트베드 3-2. 1구축 및 운영 프로(토타입)

기술시연평가보고서

11.11~12.05

50 DIP 100% 기술시연평가 보고서 완료 ․

평가툴 개발 및 적용 ․방안 수립

평가툴 개발1.

차 테스트 연구기관별 개발기술 적용 테스트 시행 - 1 :

구분 주요평가내용

인텔리전트

스페이스 개발

엣지블렌딩 무대적용 영상제작 및 시연 방향성o ,

오브젝트와 무대의 개별 영상구현 가능성o

인텔리전트

드레스 개발

트렌스폼장치 의상 매핑 시스템 활용 가능성o ,

실제 무대의상 제작 시 주요 문제점 및 해결안o

차 테스트 실제 무대 및 의상에 적용 시연평가 - 2 :

구분 주요평가내용

인텔리전트

스페이스 개발

영상제어툴 바닥면 오브젝트 엣지블렌딩 활용성o , /

곡면매핑 무대연출 조명과 영상의 상호작용o ,

공간감 착시감 등 효과 차별성 평가o , ,

인텔리전트

드레스 개발

트렌스폼드레스의 연기 및 안무와 결합성o

의상 효과와 무대연출 조명과 영상의 상호작용o ,

인터랙티브매핑의 인식율 및 공연적용 가능성o

Page 19: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 16 -

개발된 기술의 완성도보다 주요 개발기술의 무대연출 적용 가능성 및 연출효과 ※

극대화에 대한 기여도 중심으로 평가툴 개발

적용방안 수립2.

차 테스트베드 운영 - 1 : 완료(2012.04.02~2012.04.16)

구분 세부내용 평가방법

무대

다중프로젝션 통합제어 솔루션 엣지o ,

블랜딩 지오메트릭 적용 테스트 완,

료 연구팀 자체평가

적용방안마련( )

의상트렌스폼 드레스 인터랙티브 맵핑 적o ,

용 테스트 완료

차 테스트베드운영 - 2 - 완료 (2012. 05. 31)

구분 세부내용 평가방법

무대실제의 크기 구조물 제작o 1/10

무대 기술스텝 협력을 통한 무대구현 - /전문평가단 평가

전문기술 및 (

실제공연적용

문제점 도출)

의상실제 공연용 무대의상 제작 중o

의상 감독 협력을 통한 시제품 제작 -

공통무대 조명 배우동선 프로젝션설비 o , , ,

등에 대한 공연연출 및 기술시연

관객리뷰 통계 및 ․기술 개선사항 도출

관객리뷰 통계1.

기술시연평가 연구용역 시행 대구대학교 산학협력단 : ․중국 동관 투란도트 공연을 통한 현지 관객 설문조사 완료 - ‘ ’

연구용역 결과물 ․기술시연평가 연구용역 원가계산서 -

해외자료조사결과보고서 기술시연평가 중국인관람객 현지조사통계 - ( - )

Page 20: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 17 -

기술 개선사항 도출2.

테스트베드 운영 및 평가 ․

차 테스트베드1 차 테스트베드2

축소모형 및 의상샘플을

통한 기술적용 사전 평가

실제 공연장 환경 적용 및

배우 시연을 통한 평가

차년도 테스트베드 운영 결과 1․평가 결과 -

구분 세부내용

장점

다중영상솔루션 국산화 시도 긍적적이며 완성도 높음o

공연환경에 따른 설정변경 및 확장 용이성 보유o

다양한 이미지 연출에 의한 효과 기대o

기존 스텝들의 활용성 높을 것으로 예상o

단점

다양한 공연 요소와 결합을 위한 완성도 부족o

공연 콘텐츠 중심의 기술개발 노력 필요o

의상의 경우 배우의 연기를 위한 방안 마련 필요o

공연 적용을 위한 스텝들과의 적극적 협력 필요o

증빙사진 -

Page 21: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 18 -

나 평가항목 달성여부 .

연구개발 목표

계획 실적

평가항목 단위개발목표치 달성여부

(Y/N)달성수치 달성수치의 산출근거 측정방법( )

차년도1 차년도2 차년도3

인텔리전트

스페이스 개발

다중 프로젝션

엣지블랜딩 손실범위

손실

범위

%

20% 15% 8% Y 15%

여러대의 프로젝터로 다중 프로젝션을 한 후 영상의 손실범위 측정

엣지블랜딩 영역의 톤 변화가 일정해지는 경계점으로부터 영상 끝부

분 면적측정

하이브리드 비전 트래킹

시스템 인식범위

트래킹

범위

m

3m

x 3m

x 3m

10m

x 4m

x 4m

20m

x 5m

x 5m

Y

3m

x 3m

x 3m

테스트용 오브젝트 모형을 제작하여 위치를 움직이며 비전 트래킹을

통해 정확한 형태 인식을 할 수 있는 범위 측정

를 이용한 배우 RTLS

위치 디텍팅 오차범위m 1 0.6 0.3 Y 1m

테스트베드 공간에 를 구축하고 테스터가 움직이며 실시간으로 RTLS

받아보는 데이터값과 실제 공간에서 움직이고 있는 테스터의 좌표를

비교하며 오차범위 측정 최소 회 측정( 100 )

축 센서 가속도 센서6 ( ,

지자기 센서 를 이용한 )

방위각 및 기울기

오차범위

/s, g̊ ±10 /s, ̊±1g

±8 /s, ̊±0.5g

±5 /s, ̊±0.1g

N±0 /s, ̊± g0

테스트베드 공간에서 테스터에게 사용자 상태 감지 센서를 부착시킨

후 움직임에 따른 영상 컨텐츠 인터랙션 오차범위 측정

다중 프로젝션 통합관리

프로그램 사용자 만족도점수 점50 점70

점80

이상Y 60

연차별 다중 프로젝션 통합관리 프로그램 시연 및 사용자 만족도 조

인텔리전트 스페이스의

공연전문가 만족도점수 점30 점50

점70

이상Y 50

시연 후 인텔리전트 무대 제작과 관련된 전문가들을 상대로 만족도

조사

인텔리전트

드레스 개발

트랜스폼 드레스

피지컬 하드웨어 및

제어장치 오동작율

%10%

이내이내5% 0.5% Y 10%

테스트용 더미에 트랜스폼 드레스를 장착한 상태로 피지컬 하드웨어

장치를 반복적으로 동작시켜 오동작율 측정 최소 회( 100 )

사용자 위치 변화에

따른 프로젝션 매핑

영상의 매칭오차범위

mm 20mm 10mm 5mm Y 20mm배우의 움직임에 따른 실시간 프로젝션 매핑 영상을 촬영한 영상 분

Page 22: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 19 -

프로젝트 총괄현황 및 수행실적4.

가 프로젝트 총괄현황 .

구분 주요 현황 향후 계획

콘텐츠기획 및 제작

개발기술 미적용 상태의 오리지널 버전으로 ○ 차년도 사업 수행1

국내 연출진 구성top class ○ 유희성 연출 이해제 대본 가사 장소영 작곡 ( ), ( / ), ( /편곡 음악감독 오재익 안무 서숙진 무대디자/ ), ( ), (인 민경수 조명디자인 권도경 음향디자인), ( ), ( ), 한정임 의상디자인 김미경 기술감독( ), ( )

○ 글로벌 프로젝트 기술투입으로 활발한 해외진출제작비의 추가 확보로 무대 음향 의상 조명 , , , ○ 등 스텝인원 보강수준 높은 주 조연배우 투입으로 공연 수준 , ○ 향상

제작비 확보

전체 제작비 억원 : 10○ 투자계약 완료 대구시 사업비 예산 확보 억 - : (1원)

완료 년 중국 제남시 공연 협의 및 - MOU : 2012체결MOU

협의중 중국 항주시 공연 및 문화 교류 관련 - : 협의 중

문화체육관광부 주최 창작뮤지컬 지원 육성사, ○ 업 중 우수창작뮤지컬 해외공연 공모를 통하여 실질적인 제작비 확보 억 원(3 )

지속적인 국 내외 공연으로 수익금 창출○ ⦁

국내외 배급진출( )

년 하반기 우리금융아트홀 공연 기획 중2012○ 년 국내 공연 후 중국 항주 및 제남시 2012○

공연 추진 중창작뮤지컬 지원 육성사업 선정으로 해외 사업 ○ 영역 확대

제남 및 항주 공연을 실현하고 베이징( ), 北京○ 우한 충칭 시안 등 뮤지컬 ( ), ( ), ( ) 武漢 重慶 西安신흥 시장 진출예정

기타

공연 이외 사업 추진 콘텐츠 음원OSMU : ( , ○ 등 요소기술 상용화를 위한 공연 등DVD ),

공연문화도시의 주 콘텐츠로 관광과 연계한 ○ 통합상품 개발기술 상용화를 위한 해외 마케팅 사업 추진○

뮤지컬 투란도트 의 해외진출을 통해 뮤지컬산‘ ’○ 업의 활성화와 글로벌진출을 추진하는 국내 공연제작사들의 허브 역할 수행드라마와 에 이어 해외시장을 공략할 수 K-POP○ 있는 한류시장의 다변화 및 시장 확대

나 당해연도 프로젝트 수행실적 .

계획대비 실적 결과물 중심 1) ( )

계획 된 당해연도 결과 수행결과

상반기 결과

기술 및 적용 사례 리서치 및 보고서 완료○

시놉시스 별 미디어 적용 구성안 완료○

제작비 투자유치○

기술 및 적용사례 리서치 보고서○

국내외 디지털 퍼포먼스 및 관련기술에 대한 조사 분 - /

석 및 보고서 작성 완료

시놉시스별 미디어 구성안 완성○

연출진과의 회의를 바탕으로 각 장면별 주요 기술적 -

용 시나리오 및 시스템 구성도 제작완료

년 중국 동방송레이 그룹과 체결된 중국 라이선스 2011○

공연 후 공연 수익금 및 상금 억 천만원 발생1 3

년 제 회 대구국제뮤지컬페스티벌 공식 참가 비용 2012 6○

약 억원 확보1

○ 성공적인 중국 진출 후 방송 지면 및 인터넷 신문 보도,

대구 시 메인 뉴스 중국 동관뮤지컬페스티벌 특 - MBC 9

집 기획 보도 회4

지면 및 인터넷 기사 약 회 - 20

기술시연평가 연구용역 원가계산서○

계명대학교 부설 산업경영연구소 용역 시행 -

기술시연평가 연구용역 계약 대구대학교 산학협력단: ○

공연 및 관객에 대한 연구조사 분석 및 보고서 제작 - /

중국 동관 옥란대극장 초청공연 및 자료수집( ) ○

투란도트 관객대상 설문지 총 매 명 - ‘ ’ : 200 ( )

차 설문지 및 현지실태조사 자료에 대한 분석 결과 - 1

하반기 결과

○ 국내 온 오프라인 홍보를 통한 프로모션 /

피드백 데이터 분석 완료

Page 23: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 20 -

주요 추진내용 2)

기획 행정안전부 지방브랜드 세계화 시범사업 에 선정 년 뮤지컬 투란도트를 콘텐츠로 사용: 2012 ( )○ 「 」 『 』

뉴욕뮤지컬페스티벌과 지속적인 교류공연과 창작뮤지컬 투란도트 해외 수출 및 년 중국 동관뮤지컬 ' ' 2012

페스티벌 참여 등 활발한 해외교류 사업을 통해 국제도시로의 위상을 정립을 위하여 창작 뮤지컬

투란도트를 주 제공 content

투자유치 문화체육관광부 주최 창작뮤지컬 지원 육성사업 중 우수창작뮤지컬 해외공연 공모를 통하여 실질적인 : , ○

제작비 확보 억 원 규모 (3 )

대구광역시 문화산업과를 통해 년 제 회 대구국제뮤지컬페스티벌 초청비 약 억원 확보 2012 6 1.6

마케팅 년 하반기에 중국 제남시 및 항주시에서 해외 공연을 협의 중: 2012○

동관 미디어 그룹을 통해 기술 수출 및 해외진출 추진 중

기술시연평가 연구용역 해외 현지 관객 조사를 위한 설문지 개발○

사업참여기관 연구자 해외 현지공연 관객 및 공연인프라 조사 중국 동관 투란도트 초청공연(2012.1.5~8, ‘ )○

차 테스트베드 구축 및 운영 주 바이널 숭실대학교 연구팀 개별 기술시연 및 적용 가능성 평가1 (2012.04.02~16, ( ) / )○

차 테스트베드 구축 중 공연장을 통한 축소무대 및 의상제작 중2 (2012.04.23~05.25, )○

Page 24: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 21 -

세부 연구개발내용 및 결과5.

개발 수행내용 및 결과 다중 프로젝션의 콘텐츠 중앙컨트롤 기술개발 1-1:

그림 다중 콘텐츠 소스관리 및 재생가능 프로그램< 01> (CMS) Ver 1.0

그림 다중 콘텐츠 소스관리 및 재생가능 프로그램 통합제어 테스트< 02> (CMS)

개발 프로세스

필요기술 도출 및 차수별 개발 로드맵 수립 뮤지컬 공연에 최적화된 다중 프로젝션 - → 최적화

하드웨어 설계 → 차버전의 소프트웨어 기능 및 화면구조설계 CMS 1 → 극장내 효율적 운용이

가능한 기획 및 디자인 CMS User Interface → 를 이용한 소프트웨어 개발 WPF

개발 결과

다중 콘텐츠 소스관리 및 재생가능 프로그램 - (CMS) Ver 1.0

- 소프트웨어 작동 매뉴얼CMS

- 차 테스트베드 수행결과1 다중 프로젝션 통합관리 프로그램 사용자 만족도 점 달성60

Page 25: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 22 -

개발 수행내용 및 결과 1-2: 다중 프로젝션 지오메트릭 캘리브레이션 및 심리스 콘텐츠 재생 기술 개발(Seamless)

그림 다중소스 엣지블렌딩 및 콘텐츠 지오메트릭 소프트웨어 시스템 설계< 03>

그림 다중소스 엣지블렌딩 및 콘텐츠 지오메트릭 소프트웨어 < 04>

개발 프로세스

소프트웨어 기능 및 화면구조설계 기획 및 디자인 를 이용한 소프트웨어 - User Interface WPF→ →

개발 테스트 스크린 기획 및 제작 엣지블렌딩 프로젝션 맵핑 테스트를 위한 영상 콘텐츠 / → →

제작 및 투사 차원 그리드맵 생성 엣지블렌딩 영역 설정 및 실시간 지오메트릭 조작3→ →

개발 결과

다중소스 엣지블렌딩 및 콘텐츠 지오메트릭 소프트웨어 및 매뉴얼 -

기본 프로젝션 대 및 추가 확장 와의 콘텐츠 연동이 가능한 핵심 라이브러리 개발 - 4 , CMS

한 화면에서 프리뷰 및 콘트롤 가능한 엣지블렌딩 및 지오메트릭 조작 결합기술 개발 -

Page 26: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 23 -

개발 수행내용 및 결과 1-3: 착시를 주는 영상매핑 기술을 통한 평면적 무대공간의 차원 가상공간화 기초기술 개발3

그림 영상 콘텐츠를 이용한 차원 가상공간화 프로그램< 05> 3

개발 프로세스

- 디지털 공간 연출을 위한 기술요소 도출 → 테스트 적용씬 설정 및 스토리보드 제작 → 도출된

결과를 토대로 콘텐츠 콘텐츠 모델링 및 렌더링 3D → 비율의 무대 미니어처 설계 및 제작 1/15

→ 본 과제에서 개발된 다중콘텐츠 차원 공간맵핑 및 엣지블렌딩 프로그램내에 영상 소프트웨어 3

및 하드웨어 셋팅 → 타이밍 조정 및 영상 맵핑 맵핑영상 재생 ->

개발 결과

영상 콘텐츠를 이용한 차원 가상공간화 프로그램 매뉴얼 - 3

평면 입면 오브젝트의 연동을 통한 맵핑 프로세스 및 공간연출 기술 개발 - , ,

차 테스트베드 수행결과 사용자 시연 및 프로그램 만족도 점 달성 - 1 50

Page 27: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 24 -

개발 수행내용 및 결과 2-1: 피지컬 컴퓨팅 기술을 이용한 트랜스포밍 드레스 프로토타입 개발

그림 트랜스포밍 드레스 설계도면에 기반하여 제작된 프로토타입< 06>

개발 프로세스

드레스 외부 견장 부분 의 조형적 형태가 달라지거나 내부 구조의 변형이 일어나게 하는 피지컬 기술 - ( )

요소 분류 트랜스포밍 드레스의 효율적인 기술개발 기법 제시(→ 프레임 심지 결합 기법/ ) →

인체공학적 피지컬 하드웨어 설계도면 제작 등을 이용한 피지컬 기술기반의 Arduino, Max/MSP →

트랜스포밍 드레스 제어모듈 개발 모듈을 사용하여 무선 조종 할 수 있는 컨트롤러 제작 Xbee → →

안테나를 사용하여 무선 통신거리 연장 무선컨트롤러를 이용하여 양쪽 모터를 동시에 혹은 각각을 →

따로 제어할 수 있도록 제작 트랜스포밍 드레스 프로토타입 목깃 견장 부분 제작 견장부분에 ( , )→ →

를 부착하여 견장이 사라질 때 발광하도록 제작LED

개발 결과

피지컬 하드웨어 설계도면을 바탕으로 한 트랜스포밍 드레스 프로토타입 -

프로그램을 사용하여 모터의 움직임을 정확하게 조절할 수 있는 모듈 개발 - Arduino, Max/MSP

모터 두 개의 움직임을 자유자재로 조절할 수 있는 무선컨트롤러 개발 -

장착이 가능한 키네틱 구조 설계 - LED-bar

테스트용 더미에 트랜스포밍 드레스를 장착한 상태로 피지컬 하드웨어 장치를 반복적으로 동작시켜 -

측정한 결과 오동작률 ,

이내 달성 10%

Page 28: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 25 -

개발 수행내용 및 결과 2-2: 인터랙티브 프로젝션 매핑 툴 및 매뉴얼

그림 인터랙티브 프로젝션 매핑 툴과 시연 이미지< 07>

개발 프로세스

를 통해 배우의 모션 좌표 생성 와 연동 로 를 통해 추출한 - Kinect Kinect Unity3D Zigfu Kinect→ →

데이터를 에서 사용 가능한 형태로 변환 를 커스터마이징하여 데이터 안정화 Unity 3D Zigfu→ →

와 연결 가능한 가상 모델 제작 에서 가상 모델과 연결 가상 캐릭터의 의상 Zigfu Unity3D Zigfu → →

변화 움직이는 배우 추적 에서 제작된 영상 소스 실시간 프로젝션 맵핑 배우의 의Unity 3D→ → →

상 변화

개발 결과

배우의 동작을 동일하게 따라할 수 있는 아바타 제작 -

실시간 사용자 모션 좌표 생성 및 콘텐츠 매칭 가능한 인터랙티브 프로젝션 매핑 툴 -

개발된 프로젝션 매핑툴을 사용하여 실제 투란도트 공연에 사용할 수 있는 시범 콘텐츠 -

배우의 움직임에 따른 실시간 프로젝션 맵핑 영상을 촬영한 영상을 분석한 결과 매칭 오차범위 - ,

달성20mm

투란도트 뮤지컬에 적용하기 위한 프로젝트 키넥트의 거리 및 위치 최적화 - /

Page 29: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 26 -

개발 수행내용 및 결과 3-1: 개발 요구사항 도출

국내 최고 수준의 연출팀의 자문▣

연출 및 기술진 자문 회의 o

연출 무대 음향 조명 의상 등 대한민국 뮤지컬 스텝 중 최고의 시스템과 조직을 갖추었으며 - , , , , ,

글로벌 프로젝트 과제에 대한 기술 적용 장면을 명확하게 하고 기존 무대 연출기법과 인텔리전트

스페이스 인텔리전트 드레스 등 첨단 기술의 접목에 있어 배우 동선과 조명 사용 범위 등 구체적인 기술 ,

적용 시점 및 장면 선정에 작품 의도를 벗어나지 않는 범위 선정

연출팀 회의 및 자문 보고 연출팀 및 기술팀 회의 진행 < > < >

동관 뮤지컬페스티벌 참가▣

o 중국 광동성 동관시 옥란 대극장 공연 및 대상 수상

기술 투입 연구 및 연장 회의 진행 후 요구사항 도출 o

장소 옥란대극장 중국 동관시 소재 : ( )․공연기간 : 2012.01.06~2012.01.07․주요성과 중국시장 첫 진출과 동시에 대상 수상 : ․

본 공연 공연 후 연출 및 기술팀 회의중국 뮤지컬 관계자 협의

미팅 및 대상 수상

Page 30: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 27 -

▣ 공간 맵핑 및 인텔리젼트 드레스 기술 적용 협의와 문제점 도출

기존 무대보다 범위가 넓어지면 관객의 입장에서 배우들의 대한 동선과 몰입도가 떨어질 것으로 -

예상되며 기술적으로 와이드한 무대 기술보다 관객의 입장에서 임팩트 있는 기술을 사용하면 좋은

반응을 얻을 것으로 예상 됨

와이드 형식의 구조는 극장 구조상 상용화하기 힘들며 중국 등 해외 공연 시 극장의 환경에 따라 -

제약이 발생 될 것으로 예상되므로 여러 공연장에 대한 리서치를 바탕으로 최적의 영상투사각 연구

인텔리전트 드레스 인텔리전트 스페이스 등 첨단 기술과 배우들의 움직임에 불리하게 적용되는 , ․부분들을 테스트베드 운영시 충분히 해결해야 함

첨단 기술이 투입되는 무대에서 소음은 작품 몰입에 좋지 않은 영향이 끼칠 것으로 판단되고 관객들이 ․편안하게 관람할 수 있는 환경을 만들어야 함

공연 실연 후 기술팀 및 연출팀 투입 기술 논의▣

중국 공연 후 실질적으로 적용 가능한 무대와 장면들에 대한 연구를 지속적으로 진행해 나가며 기술 ․투입과 무대 연출의 조화가 잘 이루어 질 수 있도록 자문기능을 강화 하고 기술 개발 적용에 대한 문

제점 도출

기술 적용 범위 확대․- 광범위한 기술 적용 보다 관객의 입장에서 입체적이고 물속의 분위기를 최대한 전달 할 수 있는 장면 연출

인텔리전트 드레스 인텔리전트 스페이스 등 첨단 기술과 배우들의 움직임에 불리하게 적용되는 부분들, ․을 테스트베드 운영시 충분히 해결해야 함

트랜스포밍 드레스 기술 적용 점검-

역동적이고 관객들에게 메시지를 전달하는 기술 중 시각적인 부분과 의미전달에 있어 비중이 높으나 , ․트랜스포밍 드레스를 구동하는 기계적인 장치들은 배우들의 움직임에 상당한 체력을 요구하며 활동

적인 에 영향을 줄 수 있으므로 예상되므로 소재탐색 및 배우와의 충분한 테스팅을 거쳐 진행하acting

기로 함

중국 현지 스텝 및 연출진 회의 조명 기술 자문 무대 연출 및 기술 자문

Page 31: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 28 -

▣ 년 월 차년도 적용 기술 연구 및 개발 보고서 작성2012 5 2

개발 보고서 요약 o

다중 프로젝션을 통한 영상 콘텐츠 재생 최적화 기술 개발 -

인터랙티브 센싱 엣지 블렌딩 카메라기반 맵핑 등의 특화된 기술을 각각 담당하는 워크스테이션 / / ․을 모듈화하여 하드웨어의 성능과 안정성 향상 및 확장성을 높이고 에서는 들어오는 화면에 대, CMS

한 세부적인 모니터링 및 관리가 가능한 하드웨어 기본 인프라 설계

예상 기대효과 o

물리적 공간의 한계와 평면적인 영상연출로 물 속 왕국이라는 비현실적이며 신비로운 작품 배경이 -

충분히 표현되지 못했던 기존 무대에 인텔전트 매핑 기술 및 피지컬 스크린 기술을 적용해 무대4D

공간을 더욱 확장하고 입체감 있는 영상연출을 통해 신비로운 바다 속 공간의 표현을 극대화하며 ,

관객에게 마치 투란도트의 배경인 깊은 심연의 수중 속에 들어 와 있는 듯한 경험을 제공

트랜스포밍 드레스 -

피지컬 컴퓨팅 기술 기반 트랜스포밍 드레스 사례 분석 ⦁ ⦁ 뮤지컬 투란도트에서 가장 극적인 장면을 선별하여 그 장면을 연출할 수 있는 피지컬 하드웨어

도면화

머리 뒤쪽에 있는 깃 장식이 크게 펼쳐져 투란도트의 전사적인 기질이 보이다가 감정의 변화에 ⦁의해 장식이 줄어드는 형태로 변형되는 구조로 설계

반복격자 구조로 디자인하여 단순하고 효율적으로 동작하며 의상의 후면부에 자연스럽게 장식이 , ⦁숨겨질 수 있는 구조물을 만들어 안정적인 장착이 가능하도록 설계

예상 기대효과 o

배우의 연기 또는 영상으로만 표현하기 힘들었던 투란도트의 정서적 감정적 변화의 과정을 의상을 - ,

통해 시각적으로 표현하여 관객들의 예상하지 못하였던 변화를 통해 극적 상황을 극대화 하고,

배우가 의상을 갈아입는 것이 아닌 의상 자체가 서서히 변하며 투란도트의 매혹적이고 아름다운

모습과 죽은 어머니에 대한 복수의 감정까지 다양하게 연출하여 캐릭터 변화를 긴장감 있게 표현

증빙 사진 o

기술 요구사항 설계서

Page 32: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 29 -

개발 수행내용 및 결과 차 테스트베드 구축 및 운영 프로토타입 3-2 : 1 ( )

가 평가툴 개발 및 적용방안 수립.

평가툴 개발 성과o

차년도 개발 기술의 경우 바로 공연 적용에 어려움이 있어 기술별 테스트 결과 도출을 통해 시제품 - 1 ,

제작의 시행착오를 줄이고 이를 바탕으로 공연시스템 접목을 통한 차 테스트를 시행하고자 함, 2

차 기술시연평가툴 개발 - 1

사전 기술시연 전문가 간담회 기술시연 결과 도출

연구팀 개별 시연o

자체 기술시연평가 o

개발기술 시연o

공연기술진 회의o

기술개발 효용성o

공연적용 가능성o

기술시연평가 주요 내용 및 평가항목 ․인텔리전트스페이스 다중프로젝션 및 엣지블렌딩 시스템 시연평가o :

엣지블렌딩 기술 무대적용 가능성 및 해결점 도출 -

테스트 영상제작 및 무대 시연을 위한 방향성 및 보완점 -

오브젝트와 무대의 개별 영상구현 가능성 -

인텔리전트드레스 트렌스폼드레스 및 인터렉티브매핑o :

트렌스폼 하드웨어 장치의 실제 의상적용 가능성 및 해결점 도출 -

배우 움직임에 대한 매핑 시스템의 공연 연출 시 실제구현 가능성 및 보완점 -

실제 무대의상 제작 시 문제점 및 해결방안 -

개발자 중심 기술시연평가로 별도의 평가툴 없이 주요 평가항목을 통한 자유로운 의견 도출 ※

차 기술시연평가툴 개발 - 2

시제품 제작 기술시연평가 기술시연 결과 도출

o 축소형 무대제작1:10

의상샘플 제작o

실제무대환경 구축o

개발기술 공연시연o

전문평가단 운영o

예비관객 설문조사o

기술개발 진척도o

효용성 문제점도출o ,

공연적용 가능성o

기술시연평가 주요 쟁점 ․인텔리전트스페이스 다중프로젝션 솔루션 차원 공간매핑 엣지블렌딩o : , 3 ,

영상제어툴 인터페이스의 효율성 및 활용가치 셋업 시 적정한 가능 여부 - ,

무대 뒷면 공간이 없는 경우 활용 가능성 바닥면 오브젝트 매핑 시 엣지블렌딩 활용성 - , /

공간감 착시감 등의 효과 차별성 공연적용 가능성 조명과 영상의 상호작용 - , , , ,

인텔리전트드레스 피지컬컴퓨팅 트렌스폼 장치 인터렉티브매핑 툴o : ,

트랜스폼드레스 시제품의 하드웨어 완성도 오작동률 및 효과적 무대연출 가능성 - ( )

배우 움직임과 장치 인터랙티브 매핑 시스템의 유기적 이미지연출 효과 - ,

향후 기술개발 방향과 공연연출 적용 가능성 여부 공통 부문o ( )

년 월 일 기준 상단 주요 쟁점을 통한 기술시연 평가툴 개발 중 2012 4 30※

적용방안 수립o

차 테스트베드 적용방안 - 1

인텔리전트스페이스 기술개발 시연 방법 도출 및 성과o

규모의 유사 모형 제작을 통해 다중프로젝션 매핑관련 기술 시연 - 1:15

다중프로젝션 시스템 구축을 위한 기본 장비 구축 프로젝터 임대 및 거치대 구입 - :

구축예산 총 원 모형제작 원 프로젝터임대 원 스텐드 원 - : 946,000 ( : 550,000 / 286,000 / 110,000 )

인텔리전트드레스 기술개발 시연 방법 도출 및 성과o

인체모형을 사용한 트렌스폼 의상적용 시연 트렌스폼 구조물 제작 및 시연 - :

차 테스트베드 적용방안 - 2

Page 33: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 30 -

인텔리전트 스페이스 기술개발 시연 방법 도출 및 성과o

규모의 조명 및 배우 동선을 고려한 실제 환경과 유사한 무대 및 조형물 제작 - 1:10

지속적 활용을 위한 분해 조립 이동 가능한 구조물 제작 조명설비 프로젝션 시스템 - / / , ,

인텔리전트드레스 기술개발 시연 방법 도출 및 성과o

투란도트 주인공 의상 중 벌에 트렌스포밍 구조물을 장착하여 시제품 제작 - ‘ ’ 1

전기장치 및 인터렉티브 프로젝션 시스템 구축 적외선감지 센서 및 프로젝션 시스템 구축 - ,

나 관객리뷰 통계 및 기술 개선사항 도출.

관객리뷰 및 통계o

차 해외 공연 현장 관객설문조사 시행 제 회 동관시 뮤지컬페스티벌 페막작 초청공연 현지관객조사 - 1 ( 3 )

조사기간 및 장소 중국 동관 옥란대극장 : 2012.01.06~07, ‘ ’․조사규모 총 부 회수 부 배포 응답률 : 200 / 1,000 ( 20%)․조사내용 및 조사방법 ․

구분 주요내용

조사

내용

관객 기초정보 연령 직업 계층 등 공연시연 리뷰 연령 직업 계층 등o ( , , ) / ( , , )

관객특성 기술적용 후 관람의지 여부 기타 공연기술 관련 설문 등o , ,

조사

방법

관객 선호도 만족도 추천의사 등 본 과제에 적합한 설문내용 개발o , ,

o 표적집단면접법 요인별 측정문항개발을 위한 실시: FGI (Focus Group Interview)

관객리뷰 통계 결과 ․구분 세부내용

분석결과

관객 중 고학력 고소득의 중 청년층 주류로 관람료할인 등의 효과 적은 편임o / ․홍보의 경우 인터넷과 대중매체가 중요하게 작용하며 공연 주 이내 홍보 주요o , 1

신비로운 장면와 공연몰입도 주요하며 의상 공간적 한계 무대디자인 변화 필요o , , ,

영상 적용 시 긴장감 및 신비감 제공하나 배우와 관객간 상호작용 증대 필요o ,

개선방안

현지 진행인력간 유기적인 소통과 안정적인 운영을 위한 체계적인 시스템 마련o

뮤지컬의 완성도가 관객에게 미치는 영향이 크며 이에 대한 보완o ,

현지 공연에 대한 적극적인 홍보가 중요하며 다양한 체험프로그램 보완o ,

증빙사진 ․

현지조사 및 협의 투란도트 공연‘ ’ 설문조사

Page 34: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 31 -

기술 개선사항 도출o

테스트베드 운영 결과 -

무대기술개발 평가 결과o

의 경우 국내 소프트웨어 개발에 긍정적이며 발전가능성 및 활용성 높음 - CMS ,

공연 적용을 위한 공연장 환경 및 공연요소에 대한 적극적인 고려 필요 -

제작기간에 비해 다중프로젝션 기술 완성도 높으며 매핑에 대한 세부적인 보완은 필요 - ,

의상기술 평가 결과o

기술개발 및 구현 시도 연출 중점 개발에 있어서 긍정적으로 평가됨 - ,

매핑소스와 조명과의 간섭 디자인에 대한 고도화 노력이 필요 - ,

실시간 매핑은 공연 적용을 위해 공연환경 및 연출환경에 대한 적극적인 고려 필요 -

증빙사진o

Page 35: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 32 -

붙임 정량적 실적 및 우수사례[ 1]

구분

논문 건( ) 특허 건( ) 프로그램등록건( )

자가실시사업화( )

건( )

기술실시이전( )건( )

관련매출천원( )

신규고용명( )

표준화건( )SCI

비 SCI 출원 등록

국내 국외 국내 국외 국내 국외

목표

차년도1 1 1 1 - - - - - - - - 5 -

차년도2 1 1 1 2 2 1 1 - - 2 390,000 10 -

차년도3 1 2 1 5 5 2 2 1 1 1 780,000 15 1

합계 3 4 3 7 7 3 3 1 1 3 1,170,000 30 1

실적

차년도1 1 1 1 - - - - - - - - 6 -

차년도2

차년도3

합계

논문실적○

번호

발생연차

수행기관명 논문명 논문게재지 논문게재월 구분1국내 국외(SCI/ / )

구분2논문지학술대획( / )

1차1

년도숭실대학교 산학협련단

트랜스포밍 드레스 설계 및 제작 형태적 변환을 중심으로 - -

디자인 융복합 학회 2012.08 국내 논문지

2차1

년도숭실대학교 산학협련단

3D Projection Mapping System for Augmented Character in

Performing Art

SIGGRAPH Asia 2012

Technical Paper2012.12 SCI 논문지

3차1

년도숭실대학교 산학협련단

Intelligent Space & Dress for Musical 'TURANDOT'

LEONARDO Transactions

2013.06 국외 논문지

특허실적○

번호

발생연차 수행기관명 특허명 등록 출원 번호( ) 등록 출원 일( )

구분1출원 등록( / )

구분2국내국외( / )

1

2

국외특허의 경우 해당 국가 또는 여부 를 구분 칸에 명시( PTC ) ‘ ‘2 ※

프로그램등록 실적○

번호

발생연차 수행기관명 프로그램명 등록번호 등록 출원 일( ) 특기사항

1

2

사업화실적 자기실시 기술이전 매출현황( , , )○

번호

발생연차 수행기관명 실적명 구분

자기실시 기술이전( / )관련매출

천원( ) 세부내역

1

2

기술이전 기술이전 기술지원지도 기술제휴협력 기술라이센스 기술공개 등: , , , , ※ ․ ․관련매출: ※ 자기실시 후 발생매출 기술이전에 따른 기술료 등 모든 매출 해외매출일 경우 세부내역에 해외매출임을 명시, ( )

표준화 실적○

번호

발생연차

수행기관명 표준화 주제 표준화

기관명 표준화 단계 관련번호 제출 채택 일( ) 특기사항국내 국외( / )

1

2

표준화 단계란에는 반드시 기고서제출 기고서채택 표준안반영 여부를 기입‘ ’, ‘ ’, ‘ ’ ※

Page 36: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 33 -

기타 실적 및 우수사례○

동관 뮤지컬 페스티벌 공연을 통한 성공적인 중국 진출○

년 월 제 회 동관 뮤지컬페스티벌 폐막작으로 초청 및 특별대상 수상- 2012 1 3

대구 시 메인 뉴스 중국 동관 뮤지컬페스티벌 특집 기획 보도 회- MBC 9 4

지면 및 인터넷 기사 약 회- 20

년 월 제 회 대구국제뮤지컬페스티벌 공식 참가 및 참가비용 약 억원 확보2012 6 6 1○

○ 행정안전부 주최 지방브랜드 세계화 시범사업 대 브랜드 에 선정‘ 5 ‘

년 창작뮤지컬지원사업 중 해외공연부문에 최종 선정2012○

Page 37: 창작뮤지컬 '투란도트'의 창조적 연출효과 극대화를 위한 지능형무대공연 …img.kisti.re.kr/tr_img/2013003/rttrko000000153504.pdf · 공연제작 스탭진의

- 34 -

붙임 구매금액이 천만원 이상인 연구시설 장비 구매 및 관리 현황[ 2] 3 ․

차년도1■

구입기관 기자재명 모델명규격( )

취득금액원( )

활용용도 설치장소 장비 NTIS 고유번호