OOrion a Meta okosszemüvegen: tárgykeresés kézhasználat nélkül

A Meta Connect fejlesztői eseményén kijött a béta állapotból a cég viselhető eszközökhöz készült fejlesztői készlete, és a bemutatott példák között vak és gyengénlátó felhasználóknak szóló alkalmazások is szerepeltek. Az egyik ilyen a francia OOrion, amelynek vezérigazgatója a Double Tap podcastban beszélt a szemüvegre készült változatról és az üzleti modellről.

A Meta Wearables Device Access Toolkit nevű készlete (röviden: DAT) lehetővé teszi, hogy külső fejlesztők mobilalkalmazásai hozzáférjenek a Meta okosszemüvegeinek kamerájához, hangbemenetéhez és mozgásérzékelőihez. A Meta saját összefoglalója szerint a készlet egy év fejlesztői előzetes után érte el az 1.0-s verziót. Az alkalmazások első ízben lesznek megtalálhatók magán az eszközön, illetve a Meta AI alkalmazás külön szekciójában. A műsorvezetők szerint a fejlesztők többsége egyelőre nem publikálhat a nyilvánosság számára, erre csak a Meta által kiválasztott partnerek jogosultak. Az OOrion közéjük tartozik.

Mit tud az OOrion

Az OOrion eredetileg okostelefonos alkalmazás. A felhasználó megkéri, hogy keressen meg valamit, az alkalmazás pedig térbeli hanggal jelzi, merre van a tárgy, így a hangot követve lehet odatalálni. Kulcsot, kapu számát a repülőtéren vagy egy doboz tartalmát lehet vele keresni és azonosítani.

Az újdonság, hogy ugyanez már a Ray-Ban Meta szemüvegen is működik. A felhasználónak nem kell kezében tartania a telefont, és a kamerát sem kell célzottan irányítania: körülnéz, és megkérdezi, hol van a keresett tárgy. A műsor alapján a Meta a szemüvegen elérhető alkalmazások első csoportjába vette fel az OOrion-t. A beszélgetés vendége Stéphanie Robieux, az OOrion társalapítója és vezérigazgatója volt, aki az esemény idején a kaliforniai Palo Altóban tartózkodott.

A Meta Connect helyszínén

Robieux először járt az eseményen, amelyet a Meta a menlo parki központjában rendezett. Elmondása szerint a helyszínen rengeteg Meta-alkalmazott és partner volt jelen, a megnyitón pedig Mark Zuckerberg tartotta a keynote-ot, ahol új VR-szemüvegeket, a Ray-Ban Meta új generációját és más újdonságokat mutattak be. Francia szemmel különösen feltűnő volt számára, mennyire rajongják a jelenlévők a céget és a vezetőit. A Meta Európában, Franciaországban is vitatott, a biztonságról és a magánszféráról sokan kérdeznek. Robieux szerint az OOrion nyíltan képviseli az elképzelését, és őszintén megköszönheti a Metának, hogy kialakította azt az ökoszisztémát, amelyben az alkalmazás elérhetővé és gyakorlatilag használhatóvá válik.

Az OOrion korábban nem készített saját szemüveget. A csapat szerint egy nagy gyártó eszköze pénzügyileg is jobban elérhető lesz, mint egy kis cégé, és tömegesebben elterjedhet.

A Meta-szemüveg mint platform

Robieux szerint a Meta iránya kedvező az OOrion-hoz hasonló alkalmazásoknak. A cég be akarja mutatni őket, és beépíti őket abba a felfedező felületbe, amelyet indítani készül. Aki Ray-Ban Meta szemüveget vásárol, ott találkozhat az alkalmazással, ami a cég számára jelentős láthatóságot jelent. Robieux nem tart a konkurenciától sem: úgy látja, minél több alkalmazás érhető el a szemüvegre, annál vonzóbb lesz maga az eszköz.

A gyakorlati használhatóság szerinte azon múlik, mennyire gördülékenyen lehet majd alkalmazások között váltani, és egyszerre többet futtatni. Példaként azt említette, hogy a navigációs alkalmazás mellett a háttérben az OOrion is működhessen.

A hangalapú indítás már közel van: az OOrion megnyitása a „Hey Meta” hívószóval hamarosan elérhető lesz, és ezt Robieux már el is mondhatta. A fejlesztési listájának élén szerepel. Szerinte a Meta érintett csapatai ugyanabba az irányba haladnak, mint az OOrion, és nem akadályozzák a munkát.

A vendég panelbeszélgetésen is részt vett az eseményen a Meta viselhető eszközökért felelős vezetőjével. Robieux ott azt hangsúlyozta, hogy szerinte a szemüvegek legnagyobb hatású felhasználási területei az akadálymentesítéshez és az önálló életvitelhez kötődnek, nem a játékokhoz. Ide sorolta a gyengénlátókat, a kognitív nehézségekkel élőket és a nagyothallókat is. Elmondása szerint a szemüveg körül fejlődő alkalmazások, például jelenetleírás vagy fordítás, szintén előtérbe kerülhetnek. A panel felvételét megígérte a műsorvezetőknek. Robieux szerint a Meta is ezeket a felhasználási módokat tartja szem előtt, amikor az akadálymentességre és a függetlenségre helyezi a hangsúlyt, és a szemüvegeket nem csak játékra szánja. Emellett jelezte, hogy az OOrion kis csapata büszke arra, hogy a Meta kiemelten foglalkozik az általuk fejlesztett megoldással.

A műsorvezetők a DAT egyik újdonságán is elgondolkodtak, amelyről az eseményen hallottak: a fej mozgásából következtetni lehet arra, merre néz a felhasználó. Steven Scott szerint ez hasznos lehet például egy égen látott madár vagy egy tárgy azonosításához, és kíváncsi volt, milyen alkalmazás építhetne erre. Robieux csapata örül, hogy a Meta kiemelte az általuk megoldott használati esetet. Szerinte a Meta termékcsapatai a szemüvegek eddigi felhasználási módjai közül az egyik leghatásosabbnak ítélték.

Nem csak vakoknak

Steven Scott, a műsor egyik házigazdája arra hívta fel a figyelmet, hogy a szemüveg olcsóbb lehet a nagyítóként használt hagyományos VR-headseteknél, amelyekre gyengénlátók sok pénzt költenek, és mainstream eszközön futtathatók vele alkalmazások. Az OOrion-hoz hasonló megoldások pedig a jól látóknak is hasznosak: sokan állnak úgy egy szoba közepén, hogy nem találják a kulcsukat.

Robieux ezt megerősítette. Múzeumokban és szállodákban is dolgoznak, és a múzeumok maguk jelzik, hogy az alkalmazás a kínai látogatók számára is hasznos lehet. Az OOrion segítségével egy műalkotást fel lehet venni az alkalmazás mesterséges intelligenciájába, hogy később egy vak vagy gyengénlátó látogató megtalálja, és részletes ismertetést kapjon róla. Az alkalmazás felismeri például a Mona Lisát, majd megkérdezi, szeretne-e többet tudni róla, amit a felhasználó dupla koppintással jelezhet.

Ennek kapcsán Robieux a távirányító példáját hozta fel, amelyet eredetileg kerekesszékesek számára fejlesztettek ki, ma viszont mindenki használja. Az OOrion csapata szerinte nem zárkózik el attól, hogy az alkalmazást más felhasználói csoportok is használják. Ez az ügyfeleknek is előnyös, mert több a felhasználó, a felhasználóknak pedig azért, mert több helyen érhető el a szolgáltatás. Scott hozzátette, hogy a vak közösségen belül olykor megjelenik az az álláspont, hogy egy megoldás legyen csak az övék. Szerinte ez nem szolgálja a technológia fennmaradását.

Üzleti modell: a helyszínek fizetnek

Az alkalmazás a felhasználóknak ingyenes, ez a kezdetektől a cég elképzelése. A bevétel a helyszínektől származik: szállodáktól, éttermektől, múzeumoktól, pályaudvaroktól. A cég ígérete szerint az OOrion mesterséges intelligenciáját az adott helyszínre tanítják be, cserébe új ügyfélkört kapnak a helyszínek: azokat a vak és gyengénlátó látogatókat, akiket addig nem tudtak kiszolgálni.

Robieux szerint Franciaországban egyre többen ismerik fel az akadálymentesség jelentőségét. Az Intermarché élelmiszer-áruházlánccal például valószínűleg hamarosan jelentős megállapodást írnak alá. Az érvelésük az, hogy az OOrion elérhetőbbé teszi az áruházakat, a közösségük tagjai pedig a szolgáltatást használó üzletbe fognak menni, nem a szemben lévőbe. Ehhez hozzátette, hogy a látássérültek száma a következő években várhatóan nőni fog. A cég szerint ezek valós üzleti érvek azok számára, akiket az akadálymentesítés önmagában nem győz meg. A csapat nem szégyelli, hogy a modell részben a közösségre épül: a felhasználók tesztelik, hogy a megoldás valóban segít-e. Az értékesítési vezetőjük szerint a „nálunk nincs vak vásárló” kifogásra a legjobb válasz az, hogy érdemes megkérdezni, miért nincs.

Technikai háttér: helyi feldolgozás és késleltetés

Az európai szabályozás miatt nem volt különösebb nehézségük a szemüvegre való átállással, mondta Robieux, mert az alkalmazás alapvetően helyben, az eszközön fut. A működés alapja a kamera képfolyama, így lényegében a bemeneti videófolyamot kellett kicserélni a szemüveg kameráira.

A legfőbb aggodalom a késleltetés volt. Egy akadályra figyelmeztetni öt másodperces késéssel értelmetlen. Ezt a Meta csapatának az elsők között jelezték. A Meta kéthetente egyeztet velük, és a visszajelzés nyomán beépítette a Wi-Fi-kapcsolatot: a szemüveg így nem csak Bluetooth-on csatlakozhat, és a videófolyam minősége is sokat javult. További kihívás volt a hangvezérlésre épülő működés, mert a korábbi hangasszisztensek gombjait VoiceOverrel kellett végigsöpörni.

A műsorvezetők megjegyezték, hogy a telefonon az Apple Intelligence is sok lehetőséget adna. Robieux szerint azonban nem az a kérdés, melyik szereplő mesterséges intelligenciája jobb. A különbséget az jelenti, hogy az OOrion saját algoritmusai helyben futnak, és számítógépes látáson alapulnak. Robieux szerint a Meta ezért is őket választotta. Ez internetkapcsolat nélkül is előny, például vészhelyzetben: a telefonos változat kapcsolat nélkül is működik, bár a szemüveg csatlakoztatása ilyenkor gondot okozhat. Robieux szerint a helyi, számítógépes látáson alapuló algoritmusokkal például gyalogátkelők felismerése is megoldható lenne, bár ezt egyelőre nem tervezték. Az alkalmazás egyelőre iPhone-on érhető el, Androidra még nem.

Visszajelzések és tervek

A felhasználói közösséggel a cég egy WhatsApp-csoporton keresztül tartja a kapcsolatot, és van e-mail-címük is, amelyre érkező leveleket Robieux néha maga válaszol meg. A kérdéseket és a kényelmetlenségeket a fejlesztők a tennivalók listájára veszik, miután átgondolták őket. Robieux szerint a csapat célja, hogy a felhasználói kör egészséges ütemben nőjön.

A friss fejlesztések között szerepel a nemrég indított „Ask Anything” vagy „Find Anything” funkció, amellyel gyakorlatilag bármit lehet keresni, és a saját tárgykönyvtár is könnyebben bővíthető. A következő lépés a helyszínekhez kötött funkciók fejlesztése lesz. Az OOrion azt akarja elérni, hogy például pályaudvaron vagy áruházban az alkalmazás kontextust is adjon a látottakhoz: az általános mesterséges intelligencia meg tudja mondani, mi van az ember előtt, de azt már nem, hogy az adott helyen hol van egy adott dolog, vagy melyik műalkotás áll előtte.

Scott ezt egy kórházi élménnyel szemléltette: egy alkalmazás a kijáratot jelezte, de három irány közül kellett választania, és a kis nyilat, amely megmutatta volna, merre kell menni, az alkalmazás nem látta. Robieux szerint pontosan erre készülnek: az összetett helyszíneket szeretnék érthetővé tenni, fizikai telepítés, nagy térképezés vagy címkék nélkül.

Összegzés

A Meta fejlesztői készletének megjelenésével az OOrion-hoz hasonló, saját fejlesztésű alkalmazások közvetlenül elérhetik a szemüveg felhasználóit. A gyakorlati siker azon múlik, mennyire lesz zökkenőmentes az alkalmazások közti váltás, milyen gyorsan nyílik meg a publikálás szélesebb körnek, és hogy a helyszínekre szabott funkciók mennyire válnak be a valós környezetben.

A cikk a Double Tap podcast 2026. szeptember 27-i adása alapján, AI felhasználásával készült, ezért apróbb pontatlanságokat tartalmazhat.

Szólj hozzá!

Az e-mail címet nem tesszük közzé. A kötelező mezőket * karakterrel jelöltük