Nova revolucija: kako dodirujemo XR bez dodira
Dok se većina rasprava o prostornom računalstvu posljednjih godina vrti oko rezolucije zaslona, procesora i field of view parametara, u pozadini se događa tiša, ali jednako važna promjena. Način na koji uopće komuniciramo s XR sustavima ulazi u novu fazu. Klasični kontroleri, laserski pokazivači i optičko praćenje ruku dobivaju ozbiljnu konkurenciju: neuralna sučelja koja izravno čitaju električne signale mišića i živčanog sustava.
Na sajmovima poput AWE 2026 upravo su takvi „neuralni“ inputi izdvojeni kao sljedeći veliki skok u prirodnosti XR sučelja. Obećanje je jasno: interakcija bez vidljivog upravljača, gotovo na razini same namjere pokreta. U kombinaciji s prostornom AI i naprednim trackingom, XR postaje manje nalik „upravljanju uređajem“, a više nalik produžetku vlastitog tijela.
Od kontrolera do EMG narukvica
Što su neuralni input uređaji?
Pod pojmom neuralnog inputa u kontekstu XR-a najčešće se misli na narukvice i trake za zapešće koje koriste površinski EMG (elektromiografiju) i druge biometrijske signale. Ti uređaji mjere sitne električne aktivnosti mišića pod kožom i pretvaraju ih u naredbe za XR sučelje.
Za razliku od optičkog praćenja ruku, koje ovisi o kamerama, osvjetljenju i jasnoj liniji pogleda, EMG narukvica može detektirati da korisnik želi stisnuti šaku, uperiti prst ili uhvatiti virtualni objekt čak i kada je pokret jedva vidljiv ili potpuno skriven od kamere. Dovoljna je mikro kontrakcija mišića pod rukavom košulje.
Kako radi površinski EMG u XR-u
Tehnološka osnova je relativno poznata iz medicine i sporta, ali se u XR-u koristi na novi način:
- elektrode u narukvici prikupljaju EMG signal s podlaktice ili nadlaktice
- analogni signal se filtrira, pojačava i digitalizira u stvarnom vremenu
- modeli strojnog učenja prepoznaju obrasce koji odgovaraju određenim gestama ili namjerama
- XR sustav prevodi prepoznati obrazac u akciju: select, grab, scroll, rotate, teleport i slično
Neki od najnovijih prototipova, predstavljeni upravo u kontekstu XR i AI aplikacija, demonstriraju upravljanje virtualnim sučeljem blagim napinjanjem mišića ili sitnim gestama prstiju, bez potrebe da korisnik uopće podigne ruku u vidno polje kamere. Time se rješavaju ključna ograničenja optičkog hand trackinga: zaklonjene ruke, loše osvjetljenje, refleksije, kao i umor od stalnog mahanja u zraku.
Zašto neuralni input mijenja UX u XR-u
Od gesta do „čitanja namjere“
Za XR dizajnere i developere neuralni input znači potpuno novu paradigmu interakcije. Umjesto da dizajniraju tipke i menije za laserske pokazivače, pinch geste ili air tap pokrete, sve više moraju razmišljati o namjeri. Pitanje više nije samo koju gestu je korisnik napravio, već što je htio postići u datom kontekstu.
Primjerice, lagano napinjanje mišića podlaktice može u jednom kontekstu značiti „uhvati ovaj objekt“, u drugom „fokusiraj ovaj prozor“, a u trećem „potvrdi izbor“. XR sustav mora kombinirati EMG signal s informacijama iz prostornog trackinga, mixed reality anchors točkama u prostoru i pogledom korisnika (eye tracking) kako bi pogodio pravu akciju.
Strojno učenje i personalizirana kalibracija
Takav pristup zahtijeva sofisticiranu obradu podataka:
- strojno učenje – modeli se treniraju na tisućama uzoraka mišićne aktivnosti kako bi razlikovali slične mikro geste
- personalizirana kalibracija – svaki korisnik ima jedinstven EMG potpis; sustav mora u nekoliko minuta naučiti njegove specifične obrasce
- adaptivni modeli – signali se mijenjaju s vremenom, umorom i položajem narukvice, pa modeli moraju kontinuirano prilagođavati pragove i klasifikatore
Bez toga XR iskustvo brzo postaje frustrirajuće: lažni pozitivni signali, promašene akcije i nepredvidivo ponašanje sučelja. Zato se neuralni input uvijek kombinira s jasnim povratnim informacijama – od haptičke vibracije na zapešću do suptilnih vizualnih nagovještaja u prostoru, poput highlighta objekta prije „hvatanja“ ili laganog pulsiranja UI elementa koji će biti aktiviran.
Diskretna interakcija u svakodnevnim situacijama
Kako XR naočale postaju lakše i sve više nalik običnim dioptrijskim okvirima, raste potreba za jednako diskretnim sučeljem. Malo tko želi u javnom prijevozu ili uredu mahati rukama u zraku kako bi otvorio prozor aplikacije ili promijenio layout virtualnih ekrana.
Neuralne narukvice omogućuju upravo takav scenarij. Korisnik može, primjerice, u passthrough modu gledati fizičko okruženje, a istovremeno mikro gestama na zapešću kontrolirati floating dashboard, mijenjati veličinu prozora ili odgovarati na poruke. Izvana, jedini vidljivi pokret je jedva primjetno napinjanje mišića ispod rukava.
U kombinaciji s prostornom AI koja razumije kontekst – je li korisnik u uredu, radionici ili u pokretu – sustav može prediktivno nuditi akcije prije nego što ih korisnik eksplicitno zatraži. Ako često skaliraš 3D model odmah nakon što ga odabereš, XR će naučiti da određeni obrazac EMG signala u tom trenutku znači „povećaj“, čak i prije pune geste.
Enterprise primjene: kada kontroleri više ne rade
Rad u teškim uvjetima
Neuralni XR input posebno je atraktivan za enterprise okruženja. U industriji, logistici i održavanju opreme radnici često nose zaštitne rukavice, rade u prašnjavim, mokrim ili izrazito osvijetljenim prostorima, gdje klasični kontroleri i optičko praćenje nailaze na praktična ograničenja.
Zamislimo tehničara koji kroz XR naočale gleda digitalne twin modele stroja u tvornici. Umjesto da skida rukavice kako bi koristio kontroler ili pokušava izvesti precizne pinch geste dok mu ruke zaklanjaju cijevi i kablovi, dovoljno je da pod rukavom blago napne određene mišiće. EMG narukvica prepoznaje naredbu „sljedeći korak u uputama“ ili „prikaži exploded view modela“ i XR HUD se trenutno prilagođava.
Sigurnost i pouzdanost
U dinamičnim okruženjima, poput gradilišta ili skladišta, važna je i sigurnost. Manje je vjerojatno da će radnik ispustiti virtualni kontroler ako ga uopće nema u ruci. Neuralna narukvica čvrsto je pričvršćena, ne zauzima dlan i ne ometa fizički rad s alatima ili materijalima.
Robusnost je dodatni plus. Dok optički tracking pati u prašini, dimu ili pri jakom suncu, EMG signal ostaje stabilan. U kombinaciji s lokalnom obradom podataka na samom XR uređaju ili edge serveru, kašnjenje ostaje nisko, što je ključno za precizan tracking i izbjegavanje cybersicknessa.
Granice tehnologije: od mišića prema živčanom sustavu
Kako se tehnologija razvija, granica između „čitanja mišića“ i čitanja živčanih signala postaje sve tanja. Istraživački timovi već eksperimentiraju s uređajima koji koriste neinvazivne tehnike za hvatanje signala bliže perifernom živčanom sustavu, s ciljem prepoznavanja namjere pokreta čak i prije same mišićne kontrakcije.
Za XR to bi značilo gotovo trenutnu interakciju: sustav bi znao da želiš uhvatiti virtualni objekt ili otvoriti menu djelić sekunde prije nego što bi to bilo vidljivo golim okom ili kamerom. Takav „pre-emptive“ input mogao bi dodatno smanjiti kognitivno opterećenje i učiniti XR sučelje još prirodnijim, ali otvara i ozbiljna etička pitanja.
Privatnost, regulativa i podaci o tijelu
Širenje neuralnih sučelja dovodi u fokus nove vrste podataka: detaljne obrasce neuromišićne aktivnosti. Ti signali, u kombinaciji s generativnom AI, mogu otkriti navike, reakcije na stres, pa čak i zdravstvena stanja korisnika. Pitanje tko ima pristup tim podacima i kako se oni pohranjuju postaje ključno.
Regulativa tek hvata korak s ovim razvojem. Standardi interoperabilnosti i sigurnosti još se formiraju, a XR industrija traži ravnotežu između personalizacije iskustva i zaštite privatnosti. Ključni zahtjevi koji se već ističu uključuju:
- end-to-end enkripciju EMG i srodnih signala
- obradu osjetljivih podataka lokalno, bez slanja u cloud gdje god je to moguće
- transparentne postavke koje korisniku jasno pokazuju što se prikuplja i zašto
- mogućnost potpunog brisanja biometrijskih profila na zahtjev
Bez povjerenja korisnika neuralni XR input teško će izaći iz nišnih profesionalnih primjena i postati masovna tehnologija.
Što slijedi: XR kao neprimjetni produžetak tijela
Unatoč izazovima, smjer je jasan. Kako XR uređaji postaju lakši, diskretniji i sve više nalik običnim naočalama, jednako neupadljivo morat će postati i samo sučelje. Neuralne narukvice i slični uređaji mogli bi u sljedećih nekoliko godina postati jednako uobičajeni dodatak XR naočalama kao što su danas Bluetooth slušalice uz pametne telefone.
Za krajnje korisnike to znači da će „kontroler“ XR iskustva sve manje biti fizički objekt, a sve više – vlastito tijelo. Umjesto vidljivog mahanja rukama, interakcija će se događati kroz mikro geste i jedva primjetne kontrakcije mišića, dok će sustav, potpomognut prostornom AI i kontekstualnim trackingom, pogađati što želimo učiniti prije nego što to eksplicitno izrazimo.
Ako je prošlo desetljeće obilježilo uvođenje kamera, depth senzora i inside-out trackinga koji su naučili XR uređaje „vidjeti“ prostor, sljedeće bi moglo obilježiti sučelje koje uči „osjećati“ naše pokrete i namjere. U tom scenariju XR prestaje biti dodatni sloj tehnologije i postaje istinski neprimjetan produžetak ljudskog tijela – od kontrolera do čitanja namjere pokreta.
