우리는 손가락, 손, 입, 발로 악기를 연주합니다. 이러한 인간의 사지는 근육을 미세하게 조절할 수 있기 때문에 음악 연주에 사용됩니다. 우리 얼굴은 50 개 이상의 근육을 가지고 있으며 수십 가지 표정을 만들 수 있습니다. 안타깝게도 지금까지 음악을 만드는 데 사용할 수 없었습니다. 글쎄, 상황이 바뀌었다! 최신 얼굴 추적 기술을 통해 마침내 정확히 그렇게 할 수 있습니다.
MusiFace a.k.a MusEmoji는 독특한 증강 현실 얼굴 추적 앱입니다. 얼굴 표정을 변경하여 MIDI 악기를 연주 할 수 있습니다. 앱은 MIDI 컨트롤러 및 신디사이저입니다. 전체 옥타브 범위에서 연주 할 수있는 12 개의 표준 MIDI 악기를 갖추고 있습니다. 내장 된 음성 제어 기능이 있으며 완전히 핸즈프리로 음악을 재생하려는 장애인이 사용할 수 있습니다.
MusiFace 앱은 세계에서 가장 인기있는 20 개 언어로 현지화되었으며 해당 언어 지역의 30 가지 연습 멜로디를 특징으로합니다. 자세한 지침 및 교육용 비디오도 제공됩니다.
MusiFace에는 게임과 데모도 포함되어 있습니다. 그들은 연주하기에 흥미롭고 얼굴 근육을 운동하면서 음악 제작 기술을 쉽게 향상시킬 수 있습니다.
MusiFace는 ARKit과 iPad Pro 및 iPhone X 이상에 내장 된 TrueDepth 카메라를 사용하여 얼굴 및 머리 추적을 수행합니다.