Vi spelar musikinstrument med fingret, händerna, munnen och fötterna. Dessa mänskliga extremiteter används för att spela musik eftersom de kan styra fina muskler. Våra ansikten har mer än 50 muskler och kan göra dussintals ansiktsuttryck. Tyvärr har vi hittills inte kunnat använda dem för att skapa musik. Saker har förändrats! De senaste teknikerna för ansiktsspårning tillåter oss äntligen att göra exakt det.
MusiFace a.k.a MusEmoji är en unik Augmented Reality Face Tracking-app. Det gör att du kan spela MIDI-musikinstrument genom att ändra ansiktsuttryck. Appen är en MIDI-controller och synthesizer. Den har 12 standard MIDI-instrument, som du kan spela i deras fulla oktavintervall. Den har inbyggd röststyrning och kan användas av funktionshindrade personer som vill spela musik helt handsfree.
MusiFace-appen är lokaliserad på 20 av världens mest populära språk och har 30 övningsmelodier från dessa språkregioner. Detaljerade instruktioner och instruktionsvideor finns också.
MusiFace innehåller också ett spel och en demo. De är spännande att spela och låter dig enkelt förbättra dina färdigheter för musikskapande medan du tränar dina ansiktsmuskler.
MusiFace använder ARKit och den inbyggda TrueDepth-kameran i iPad Pro och iPhone X och högre för att göra ansikts- och huvudspårning.