Обзор курса
TRANSCRIPT
Обзор курса
с/к Анализ и генерация видео и звука в реальном времени
Д.С.Перевалов, весна 2015 г.УрФУ-ИММ, г. Екатеринбург
uralvision.blogspot.comvk.com/lections_media_processingwww.facebook.com/LectionsMediaProcessing
План лекции
• Типы и примеры проектов
• Ключевые технологии
• Как создать проект
• Ваш выпускной проект
• Принципы организации мероприятий
Типы проектов
• Видеоинсталляции и звуковые инсталляции проекторы, камеры, синтез звука
• Медиаперформансы
танцовщики/перформеры, чтецы, микрофоны, VJ-пульты, проекторы, камеры, сценарий, сценография
• Физические вычисления
Arduino, Raspberry Pi, 3D-принтеры, датчики, серводвигатели.
Примеры проектовОдин из основных каталогов медиа-арт проектов:www.creativeapplications.net
1) Funky ForestИнтерактивная детская комната-лесhttp://www.youtube.com/watch?v=s4VvT1kPFHo
2) Body Paint – рисование виртуальной краскойhttps://vimeo.com/3576457
3) Sniff - интерактивная собакаhttp://www.vimeo.com/6400266Как работает Sniff: http://www.vimeo.com/6421688
4) Tokisoda & Freak Cabaret: Light painting performanceСвето-театр http://www.vimeo.com/17465389
5) Водный музыкальный инструментhttp://www.youtube.com/watch?v=CZ_KijiwQHE
Ключевые технологии
Трекинг
Видео Звук
Датчики,лампочки,
моторы
Как создать проект
I. Идея
II. Эскизы
III. Прототип
IV. Полная версия. Показ проекта
Продемонстрируем этапы создания проекта на нашем проекте для Ночи Анимации 2011 г.
I. Идея
1) Когда и где состоится показ?
2) В чём суть проекта?Иногда первична идея
Иногда первична технология, и под неё ищем идею
3) Какие использовать технологии ?
Пример идеи1) Когда и где
Ночь Анимации 20 мая 2011 г. Проходить будет в кинотеатре. Спонсор - конфеты драже Skittles.Задача - интегрировать Skittles в мероприятие и прорекламировать новый вкус Кисломикс. Обязательные элементы - кислые фрукты: лимон, лайм, яблоко.
2) Суть проектаНа стене в холле кинотеатра будет видео проекция.Проходящие мимо люди будут интерактивно взаимодействовать с изображением на экране.Когда никого перед экраном нет, то из Скиттлз будет собираться логотип 2х2. И немного анимироваться в самом логотипе, чтобы не было статично.частицы собираются по всей площади логотипа как на магнит, скорость должна регулироваться в программе.Когда к экрану будет подходить человек, то будет собираться силуэт человека из Скиттлз, а вместо головы будет случайным образом появляться один из набора кислых фруктов: лимон, лайм, яблоко...Когда человек отходит, все частицы ударяются в край экрана и резко осыпаются вниз. Потом опять плавно собирается логотип.Было бы хорошо распознавать несколько человек (до 3-5 может быть), чтобы у каждого была голова - разный фрукт.
3) ТехнологииНаверное нужно использовать кинект? Было бы лучше, если бы это было еще в 3Д. Просто может быть точки, полученные из 3Д камеры кинекта заменять на частицы Скитлз?
Игорь <[email protected]>to: Denis Perevalov <[email protected]>Date: Thu, Apr 21, 2011
II. Эскизы
(1) Эскиз итоговой картинки или создаваемого объекта
(2) Эскиз помещенияПлан или 3D-схема того пространства, в котором будет работать инсталляция или выставляться объект. Можно сделать с помощью SketchUp.
(3) Аналогичные проектыНайти видео-фото сходных проектов или похожей тематики.Выяснить, какое оборудование использовалось, какие алгоритмы и программы.Если нашёлся очень похожий проект – понять, чем наш проект отличается/интереснее/качественнее.
(1) Эскиз итоговой картинки
(2) Создание эскиза помещения в SketchUp
Очень удобная программа для рисования 3D-прототипов помещений.Это делается с помощью двух основных инструментов – прамоугольник + выдавливание.
III. Прототип
Прототип - одна или несколько маленьких программок, обычно не связанных между собой. Их цель:
1) Испробовать все технологии и алгоритмы, требуемые в проекте, но с которыми ранее не работали.
2) Оценить условия работы проекта в нужном пространстве (габариты помещения, освещённость, количество людей)
Пример прототипа
1) Трекинг силуэта человекаhttp://www.youtube.com/watch?v=WftBCwn1WyA
Denis Perevalov <[email protected]>to: Игорь <[email protected]>date: Sat, May 7, 2011
Пример прототипа
2) Поведение частиц
Сделал разлетание частиц по местам, чтоб они привязывались к некимточкам и около них тряслись. (Сейчас тряски нет, только разлетание дляпробы) Похоже на пенопласт) : http://www.youtube.com/watch?v=lMasHVgn14E
Denis Perevalov <[email protected]>to: Игорь <[email protected]>date: Sat, May 14, 2011
IV. Полная версия проекта
1) Объединение разрозненных прототипов2) Нюансировка деталей3) Итоговая настройка параметров
1) Монтаж, тестирование, показ
http://www.sodazot.com/index.php?/installations/skittles/https://vimeo.com/24537220
Пример завершенного проекта
Дальнейшее развитие проекта
Доработка данного проекта1) Нюансировка алгоритмов/графики2) Добавление новых свойств/качеств
Использование для новых проектов1) Превращение в другой проект изменением
графики/звука/параметров2) Использование ключевых блоков, созданных в
проекте, для новых проектов.
2011 – Инсталляция Мотыльки http://kuflex.com/MOTYL-KI
…
Февраль 2015 – Интерактивная видеоинсталляция Квантовая комната. Kuflex: Игорь (Sodazot) Татарников, Денис Перевалов, Ксения ЛяшенкоНа выставке Life Zone в М’АРС, г. Москва
Пример развития проекта
Квантовая комната, Kuflex, 2015 г.
Ваш выпускной проект
Идея1) Когда и где:Предположительно:Май 2015. Фестиваль фантастики «Аэлита», Екатеринбург.2) Суть – ?3) Технологии: проектор, кинект, микрофон, колонки, распечатка объекта на 3D принтере, с датчиками.
Идея, эскиз – март 2015Прототип – апрель 2015Полный проект – май 2015
Принципы организации мероприятий
Как организовать вечер/выставку, на котором можно показать инсталляцию, перформанс, эксперимент?
Эта часть лекции подготовлена совместно с Екатериной Жариновой, http://ekazha.wordpress.com
