Gaat XR-bril met AI bijdragen aan behoud technisch personeel?

Niet hun vakkennis of vaardigheden staan mensen met een visuele beperking in de weg op de werkvloer. Juist de omgeving levert praktische problemen op. Lees maar eens een half verstopt typeplaatje op een machine of de kraaienpoten van een collega. Het Duitse onderzoeksproject AssistiveXR4Work wil daar verandering in brengen.

Want traditionele hulpmiddelen zijn vaak alleen maar bruikbaar in een kantooromgeving. Volgens de onderzoekers van het Karlsruher Institut für Technologie (KIT) en Fraunhofer IOSB achter het project voldoen die daarbuiten maar beperkt. Daarom willen ze een mobiel assistentiesysteem ontwikkelen op basis van een XR-bril (eXtented Reality) en AI, zodat mensen met een visuele beperking zelfstandiger kunnen werken.

Demonstrator binnen vier jaar

De technologie is niet alleen bedoeld als middel om de toegankelijkheid van werk te vergroten. Ook wil het project bijdragen aan het terugdringen van het tekort aan vakmensen. Werknemers die tijdens hun loopbaan slechter gaan zien, moeten nu soms van functie veranderen of stoppen met hun beroep, terwijl hun vakkennis en ervaring nog steeds bruikbaar zijn.

Met AssistiveXR4Work willen de onderzoekers eraan bijdragen dat deze werknemers hun beroep langer zelfstandig kunnen blijven uitoefenen. Volgens gegevens van het Duitse Institut für Arbeitsmarkt- und Berufsforschung ontstaan veel ernstige beperkingen pas tijdens het werkzame leven. De kans dat mensen met een ernstige beperking vijf jaar later nog werkzaam zijn, ligt volgens het instituut ongeveer 16 procentpunt lager.

Maar een onmiddellijke redding wordt het niet. Binnen vier jaar moet een functionerende demonstrator beschikbaar zijn. Deze wordt vervolgens in de praktijk getest. Het Duitse Bundesministerium für Arbeit und Soziales ondersteunt het onderzoeksproject met ongeveer 1,5 miljoen euro.

Afgestemd op de gebruiker

Binnen de genoemde termijn moet er een systeem, dat ondersteuning aanbiedt afgestemd op de individuele visuele mogelijkheden van de gebruiker. Het systeem gebruikt een moderne XR-bril met een camera met hoge resolutie. De camera registreert voortdurend de omgeving, waarna de beelden digitaal kunnen worden aangepast. Zo kunnen contrasten worden versterkt en objecten en teksten worden vergroot. Tekst kan bovendien automatisch worden herkend en desgewenst worden voorgelezen. Geïntegreerde AI helpt daarnaast bij de oriëntatie en kan objecten in de omgeving herkennen. In een technische werkomgeving kan het systeem bijvoorbeeld relevante componenten identificeren en voor de gebruiker uitlichten.

Ook tijdens vergaderingen zijn toepassingen mogelijk. Het systeem kan informatie op een whiteboard herkennen en vergroten. Handgeschreven aantekeningen kunnen worden omgezet in digitale tekst en vervolgens direct verder worden verwerkt. Wanneer de automatische ondersteuning niet voldoende is, kan via een livestream bovendien een andere persoon worden ingeschakeld om op afstand assistentie te bieden.