Systém Kinect vyvinutý, který rozpoznává, co děláte

Anonim

Systém založený na Kinect, který rozpoznává, co děláte

Věda

Ben Coxworth

8. července 2011

2 obrázky

Některé aktivity, které systém Kinect umožnil identifikovat (obrázek: Cornellova univerzita)

Kdy a kdybychom se někdy dostali k našim osobním asistentům robotů, bylo by hezké myslet, že bychom mohli před sebou "být sami", dělat věci, jako je poškrábání našich zadků nebo kontrola našeho deodorantu - protože jsou jen roboty, že? Nebudou vědět, co děláme. Dobře ... díky výzkumu, který probíhá na Cornellově univerzitě, už existuje systém Microsoft Kinect, který dokáže správně identifikovat činnost lidí na základě pozorování jejich pohybů. Pokud by taková technologie byla začleněna do robota, je možné, že by vás mohla napomenout, že žvýkáte s otevřenými ústy - ačkoli je to pravděpodobnější, že vám může nabídnout, abyste vám pomohli zvednout těžký předmět.

Ve výzkumném projektu byla kamera Kinect RGBD (červená, zelená, modrá, hloubka) sledována čtyřmi lidmi, kteří prováděli 12 různých činností v pěti různých prostředích - kanceláře, kuchyni, ložnici, koupelně a obývacím pokoji. Činnosti zahrnovaly věci, jako je čištění zubů, vaření, psaní na tabuli, práce na počítači a pitné vody. Údaje proběhly algoritmem, v němž byly aktivity rozděleny do více spravovatelných dílčích aktivit, známých jako hierarchický model maximální entropie Markov. V podstatě uvádí, že pokud je člověk viděn jako A, B, C a D, pak E je pravděpodobně to, co dělá. Pokud systém poprvé viděl, že osoba provádí tréninkovou sadu aktivit, dokázala tyto aktivity rozpoznat s přesností 84, 3% na poli. "Pokud nebyla osoba viděna dříve, byla schopna spravovat přesnost 64, 2 procent.

Osobní asistentové roboty vybavené takovým systémem by ho mohli využít v situacích domácí péče, kontrolovat, zda lidé v péči pili dostatek vody, pravidelně si čistili zuby, užívali pilulky a podobně. V závislosti na schopnostech robota, kdyby viděla, že osoba má potíže s tím, že něco udělá, může dokonce vstoupit a pomoci.

Při pokusech se systém dokázal vyhnout tomu, že by se nechal odhodit nereagujícími gestami, které se mísily s aktivitami, a nezdálo se, že by záleželo na tom, jestli osoba, kterou sleduje, byla levou nebo pravotočivou. Vědci z Cornellu však přiznali, že všichni jejich předmětové hráli venku a nebyli si jistí, jak by systém fungoval, kdyby předměty blokovaly část jeho pohledu. Navrhovali také, že by fungovalo lépe, kdyby se systém mohl naučit rozpoznat některé klíčové předměty (zubní kartáčky, vidličky atd.), Které jsou kontextové pro určité činnosti.

Zdroj: I PROGRAMMER

Některé aktivity, které systém Kinect umožnil identifikovat (obrázek: Cornellova univerzita)

Některé aktivity, které systém Kinect umožnil identifikovat (obrázek: Cornellova univerzita)