Umoove ovládá smartphony s kývnutím a mrkání

Anonim

Umoove ovládá smartphony s kývnutím a mrkání

Mobilní technologie

Lakshmi Sandhana

4. února 2014

7 obrázků

Společnost Umoove vyvinula inovativní technologii pro sledování obličejů, která umožňuje uživatelům navigovat hru na svém zařízení iOS jen tak, že směřují směrem, kam chtějí jít

Nový technologický start Umoove vyvinul software pro sledování obličeje a očí pro mobilní zařízení, který přenáší jemné pohyby hlavy a kývne na pohyb v hře. Společnost vydala aplikaci Umoove Experience, což je bezplatná aplikace pro iOS, která demonstruje tuto technologii, ale doufá, že vývojáři třetích stran začlení technologii do svých vlastních titulů na iOS i na zařízeních Android.

"Umoove nepřichází nahradit dotek, přichází přidat další vrstvu a otevírá příležitost pro nové typy rozhraní " Yitzi Kempinski, výkonný ředitel společnosti Umoove, říká Gizmag. "Klasickým příkladem je střílečka první osoby, kde byste natáčeli pomocí dotyku a mohli byste jít pomocí dotykového joysticku, ale měli byste se zaměřit a rozhlížet se tam, kde budete čelit."

Vyzkoušeli jsme hru Flying Experience, která byla součástí hry Umoove Experience, a našel gameplay jako zcela intuitivní. Na začátku hry budete instruováni držet zařízení stabilní a trénovat své schopnosti Umoove tím, že jemně nakloníte hlavu a přesunete jeden kruh do druhého. Jakmile to uděláte, klepnete na obrazovku a začnete s Flying Experience, doprovázeným kmeny arabské hudby. Budete mít okamžitě kontrolu nad letícím charakterem v poušti a povedete sbírat láhve magické fialové části, které vám pomohou zůstat ve vzduchu.

Klepnutím na obrazovku se zvyšuje rychlost létajícího znaku, ale pokud se vám nepodaří létat a chytit láhev v čase, vaše postava havaruje a hra končí. Trvalo to trochu zvyknout, ale jemná úroveň kontroly, kterou můžete dosáhnout tím, že prostě otočíte hlavu, bylo docela působivé. Neexistovalo žádné zpoždění a aplikace byla extrémně citlivá a reagovala na pohyby hlavy na iPadu 2, a to jak v jasném, tak ve slabém světle. Dokonce i vypnutí světla a ponoření místnosti do polomoci při hraní hry vůbec neovlivnilo hru.

Létající zkušenost sama o sobě je velmi zásadní a nejsou k dispozici žádné vyšší úrovně, ale to je podle návrhu. Aplikace byla uvolněna především k prokázání toho, co společnost dosáhla pomocí svých jedinečných algoritmů (15 patentů o technologii bylo podáno). Kempinski říká, že algoritmy byly postaveny od začátku, aby se vyrovnaly s měnícím se prostředím mobilního telefonu (osvětlení, otřesy, částečná viditelnost obličeje), přičemž jsou dostatečně schopné zpracovávat videa získaná i od nejzákladnějších předních fotoaparátů.

"Sledování je jak přesné, tak velmi citlivé, ale pohyb pohybuje stejně malý, jaký je reprezentován jedním pixelem obrazu, který fotoaparát zachytí, " říká Kempinski. "A museli jsme to všechno udělat na velmi nízkém CPU, abychom nepřevzali prostředky zařízení a ponechali prostor pro běžné aplikace a hry."

Získání platformy k tomu, aby spotřebovalo pouze pět procent zdrojů CPU v reálném čase při zpracování surových snímků z fotoaparátu, trvalo, než se společnost pokoušela navázat. Myšlenkou aplikace je přeměnit přirozené pohyby hlavy a nakonec pohyby očí do smysluplných akcí, otevírat interakci založenou na zámcích a umožňovat zařízením reagovat na uživatele bez jakéhokoli dalšího zásahu (například když se na smartphone probudíte, například).

"Umoove sleduje tvář a oči, " vysvětluje Kempinski, "Tyto části těla se pohybují a podílejí se na zkušenostech uživatele ještě předtím, než technologie začala sledovat a sledovat je - jste někdy viděli někdo hrát takovou hru jako letový simulátor se zamrzlým nebo stálým obličejem a tělem? Uživatelé se zapojují do zkušenosti a pohybují se těly, i když nemají žádný skutečný vliv na hru .To je klíčem z perspektivy [uživatelské zkušenosti] reagovat na pohyby uživatelů přirozeně dělat v reálném světě a neznamená, že uživatel začne dělat nové typy pohybů. "

Společnost Umoove vytvořila sadu SDK pro systém iOS, která umožňuje vývojářům integrovat dvourozměrné funkce sledování hlav do vlastního softwaru (společnost také pracuje na 3D sledování hlav). Na cestě je vydaná verze pro Android spolu s vývojářskou sadou SDK, která je aktuálně ve fázi beta. Je určen k rozlišení mezi různými typy pohybů očí a umožňuje chytrým telefonům pochopit záměr uživatele sledováním toho, na co se dívá. Společnost tvrdí, že to umožní vývojářům vytvořit nové dynamické chování obsahu, které nutí zkoumání, jako například úsměv dítěte v ebooku a něco, když se dítě dívá pozorně na to.

"Zamyslete se nad objektem nebo produktem na 2D obrazovce, který se chová jako 3D, protože se mění podle úhlu, který hledáte na obrazovce, " říká Kempinski. "Můžete se pohybovat kolem objektu na obrazovce, jako kdybyste se dívali na objekt, který je skutečně před vámi. "

Umoove říká, že hry nejsou jedinou žádostí o tuto technologii. Po integraci do jiných aplikací technologie umožní uživatelům inteligentních telefonů dělat věci, jako například kývnout hlavou k posunu nahoru a dolů na stránku, obrátit hlavu na flip stránky eBook a pozastavit video, když se dívají pryč.

Flying Experience je zdarma k dispozici jako součást aplikace Umoove Experience v obchodě iTunes.

Níže uvedené video poskytuje představu o tom, co je software Umoove schopen.

Zdroj: Umoove

Uživatelé budou muset řídit svůj charakter směrem k lahvi pouze s použitím pohybů hlavy (Photo: Umoove)

Létání nad pouštní vesnicí (Foto: Umoove)

Algoritmy snímají pohyb tak malý, jaký je reprezentován jedním pixelem obrazu, který fotoaparát zachycuje (Photo: Umoove)

Záběr obrazovky aplikace (Photo: Umoove)

Umoove 's algoritmy pro sledování obličeje zpracovávají snímky fotoaparátu, zatímco používají pouze 5% CPU smartphonů (Photo: Umoove)

Postava v aplikaci "létající zážitek" se pohybuje v jakémkoliv směru, kam přesunete hlavu (Photo: Umoove)

Společnost Umoove vyvinula inovativní technologii pro sledování obličejů, která umožňuje uživatelům navigovat hru na svém zařízení iOS jen tak, že směřují směrem, kam chtějí jít