Инженеры компании «Карфидов Лаб» разработали конструкцию шлема Nimble. Это первая российская система захвата и переноса человеческой мимики на 3D-персонажа в реальном времени. Проект рассчитан на производство анимационного кино, телепередач, а также компьютерных игр и VR/AR-приложений. Система стоила десятки тысяч долларов и увидела свет спустя три года.
Специалисты рассчитывали создать шлем для съёмки мимики, при этом устройство должно было быть комфортным в эксплуатации. Главной сложностью стало то, что сканирование происходит в условиях активного перемещения человека.
Разработка позволяет «сканировать» человеческую мимику на съёмочной площадке, а полученные данные в режиме онлайн обрабатываются программной частью. Она осуществляет визуализацию мимики трёхмерного персонажа во время самой съёмки. При этом шлем во время работы не доставляет дискомфорта, что сокращает производственный цикл и ускоряет процесс съёмок
«Конструкция, которая на первый взгляд выглядит просто и красиво, скрывает в себе новые технические решения российских инженеров в области микроэлектроники. Над ней работали лучшие инженеры Москвы», — рассказывает Алексей Карфидов, сооснователь «Карфидов Лаб».
Система может использоваться для создания художественных и документальных фильмов, мультипликации и игр. Разработка позволяет в режиме реального времени переносить мимику актёра на трёхмерного персонажа, улавливая тончайшие нюансы игры.
«Использование системы захвата и переноса мимики Nimble расширит возможности телеканалов и кинокомпаний, поможет создавать необычный контент и представлять известные программы и фильмы в новом свете», — прокомментировал Дмитрий Шуров, руководитель отдела исследований и разработок студии CGF.
Систему полностью протестировали в рамках кинопроекта «Напарник». Мимику актёра Сергея Гармаша полностью перенесли на компьютерного персонажа.
С осени разработка продолжается при финансовой поддержке Фонда содействия инновациям. Сейчас Nimble задействован в нескольких кинопроектах, в частности в художественном фильме «Конёк-горбунок» и короткометражном анимационном фильме «Реликты».
Выделите ее и нажмите Ctrl + Enter