Extra intelligentie voor de HoloLens dankzij Azure Cognitive Services

Gepubliceerd op 15 november 2018 door Alexander Meijers. Leestijd: 3 minuten.

Azure Cognitive Services is een dienst van Microsoft die op basis van aangeleverde data met behulp van intelligente algoritmen verschillende informatie kan terugleveren. Zo is het bijvoorbeeld mogelijk om met Azure Cognitive Services beeldherkenning te laten plaatsvinden en spraak naar tekst te laten omzetten. Met Machine learning is het mogelijk om voorspellingen te laten doen en zelfs een systeem te laten bijleren op basis van aangeleverde data. Bijvoorbeeld het voorspellen van een juist resultaat op basis van een set van aangeleverde kenmerken. Beiden services zijn gebaseerd op Artificial Intelligence en beschikbaar in Microsoft Azure.

“Denk eens in wat deze extra lagen aan intelligentie kan toevoegen aan het gebruik van de HoloLens”, zegt Alexander Meijers, Microsoft MVP en Mixed Reality Evangelist bij ETTU. “De HoloLens legt vast wat de gebruiker ziet en welke handelingen er plaatsvinden. Wanneer dit gekoppeld wordt aan deze services, kunnen deze gaan leren van de handelingen en uiteindelijk voorspellingen doen voor de toekomst. Dit kan voor organisaties een enorme toegevoegde waarde bieden.”

 

Fruit classificeren met Artificial Intelligence (AI)

Er zijn bedrijven die fruit inkopen, de kwaliteit beoordelen en vervolgens het juiste fruit leveren aan hun klanten, zoals supermarkten. Degenen die het fruit daadwerkelijk beoordelen worden keurmeesters genoemd en deze mensen hebben vaak al tientallen jaren ervaring in het beoordelen en classificeren van fruit. Hierbij letten ze op kleur, grootte, geur en gaan ze af op hun algemene ervaring dat ze in de loop der jaren hebben opgedaan. “Het is niet ondenkbaar dat deze keurmeesters een keer ziek worden, met pensioen gaan of ander werk vinden. In dat geval gaat er te veel kennis en kunde verloren, wat niet met een cursus opgevangen kan worden. Ook is het voor de keurmeester niet te doen om de kennis over te zetten naar bijvoorbeeld een curriculum of leertraject. In dat geval kunnen de HoloLens en Mixed Reality in combinatie met deze services uitkomst bieden”, vertelt Alexander.

fruit-veiling

 

“Wat als we een applicatie maken die ingericht is op het beoordelen van fruit en we laten dat draaien op een HoloLens? De keurmeester draagt een uur per dag de HoloLens tijdens het werk en alles wat er gebeurt, wordt door de HoloLens herkend via Cognitive Services, geregistreerd en doorgestuurd naar Machine Learning. Daar wordt de data continu verzameld en geanalyseerd, waardoor het uiteindelijk voorspellingen kan gaan doen op basis van wat er te zien is. Wanneer een keurmeester naar een lading appels kijkt, kijkt de HoloLens mee en zal deze suggesties gaan doen over de classificatie. Uiteindelijk zal het systeem leren van de fouten en de volgende keer de correcties meenemen in de suggestie. Na verloop van tijd zullen de classificatie van de keurmeester en de suggestie van de HoloLens steeds meer op elkaar gaan lijken”, legt Alexander uit.

 

Kennis wordt zo direct mogelijk overgedragen

Zodra er zich een nieuwe keurmeester aandient bij het bedrijf, kan deze met behulp van de HoloLens snel de juiste kennis tot zich nemen. Maar de keurmeester zelf is ook een factor in het leerproces. De ene keurmeester zal mogelijk sneller het voordeel van de twijfel geven of zwaarder wegen aan bepaalde factoren, waardoor de uiteindelijke classificatie anders uit kan vallen. “Mensen zijn nu eenmaal verschillend en sommige zaken staan open voor discussie, waardoor de uitkomst kan afwijken. Deze verschillen kunnen we nooit wegpoetsen, maar het is wel van belang om deze mee te nemen in het model. Daarom is het ontzettend belangrijk dat een keurmeester elke keer inlogt onder zijn of haar eigen naam, zodat ook uit dat account conclusies kunnen worden getrokken”, aldus Alexander.

Nu is dit een heel sprekend voorbeeld, maar is het ook mogelijk om deze principes door te trekken naar andere branches waarin vele jaren ervaring verloren dreigt te gaan. Door gebruik te maken van de HoloLens, Cognitive Services en Machine Learning kan eenvoudig gedurende het werk kennis en ervaringen vastgelegd worden zonder extra moeilijke handelingen. Wanneer de drager zijn werk doet zoals hij gewend is, ziet de HoloLens wat er daadwerkelijk gebeurt,  wordt Azure Cognitive Services ingezet voor beeldherkenning en laten we Machine Learning los op de data. Hoe meer data er verzameld wordt, hoe beter de voorspellingen zijn. En hoe sneller de kennis geborgd wordt voor nieuwe gebruikers.

 

Benieuwd naar de toepassingen van de HoloLens in combinatie met deze services voor uw organisatie? Neem dan contact met ons op voor een vrijblijvende afspraak of boek een Mixed Reality inspiratiesessie of Mixed Reality workshop.

 

Tags: Mixed Reality

Alexander Meijers

Gepubliceerd door Alexander Meijers op 15 november 2018

Alexander Meijers is een energieke, creatieve, multidisciplinaire tech geek met een expertise in architectuur en ontwikkeling. Sinds 2018 is Alexander benoemt tot Most Valuable Professional (MVP) door Microsoft op het gebied van Windows Development in de categorie Mixed Reality. Hij heeft gewerkt voor een groot aantal klanten met verschillende vaardigheden en rollen. Zijn kennis is vooral gericht op Microsoft-technologie zoals Azure, Office 365, HoloLens, Logic Apps en Yammer. Daarnaast houd hij zich intensief bezig met HoloLens ontwikkeling en heeft hij de Mixed Reality User Group (MixUG) opgericht.