Niet woorden maar beelden zijn de toekomst van search
augustus 25, 2019
Beeldherkenning wordt steeds nauwkeuriger en veelzijdiger. Wie ook graag zijn klant of eindgebruiker wil verrassen, gaat nu op zoek naar relevante use cases. Rick Gloudemans (.NET developer Valtech) deelt inspiratie, inzichten en mogelijke use cases.
The future of search will be all about pictures, not keywords”, voorspelde Ben Silbermann tijdens een interview op CNBC. Ruim twee jaar later zien we steeds meer ontwikkelingen die er op wijze dat de Pinterest CEO gelijk gaat krijgen. Beeldherkenningstechnologie wordt met de maand accurater, en maakt volgens Google nu al minder fouten dan de mens (zie grafiek hieronder). Tegelijk duiken steeds meer toepassingen op die in staat zijn echte meerwaarde te genereren.
Bron: LinkedIn Pulse
Deep learning
Net als de momenteel veel aandacht krijgende ontwikkeling van stemgestuurde interfaces en zoekmogelijkheden, leunt beeldherkenning zwaar op kunstmatige intelligentie, machine learning en deep learning. Iedereen die wel eens een nieuwe jurk of tuinmeubel heeft opgezocht via Pinterest, weet hoe krachtig de mogelijkheden nu al zijn. De komst van Google Lens maakt het nu ook mogelijk om je directe omgeving scannen met de camera van je mobiele device. Nadat je bijvoorbeeld een restaurantgevel, paar sneakers of elektronische gadgets hebt geïdentificeerd, wordt het object met Augmented Reality ge-highlight. De Google tool kan vervolgens een beschrijving of locatie produceren, of je direct naar de webshop leiden waar het object te koop is.
Bron: Medium.com
Relevante retailtoepassingen
Slimme retailers springen daar uiteraard direct op in. Zo voegde e-commerce modevoorloper Asos vorig jaar al zijn Stylematch visual search tool toe aan zijn iOS en Android apps. Met een net gemaakte of geüploade foto van die ene leuke trui die jij ook zo graag wil hebben, kunnen gebruikers snel en simpel op zoek naar gelijkende kleding in het Asos-assortiment. Een extreem relevante toepassing in een tijdperk waarin bijvoorbeeld steeds meer Instagram gebruikers op zoek gaan naar (betaalbare versies van) de kleding van hun favoriete influencers.
Zelfgebouwd model
Retail is een van de vele toepassingsmogelijkheden waarin zoeken op beeld met relatief weinig moeite echte meerwaarde kan leveren voor een merk, organisatie of eindgebruiker. Zelf deden wij bijvoorbeeld onlangs een experiment met het vanaf een foto, modellen en jaargangen van trucks te identificeren van onze klant DAF Trucks. Met een zelfgebouwd model op basis van Microsoft Custom Vision AI wisten we al op basis van enkele honderden foto’s een zeer acceptabele herkenningsscore te behalen. Monteurs, verkopers of klanten kunnen daar straks hun voordeel mee doen.
Bron: Medium.com
Experimenteren met API's
Dankzij de beschikbaarheid van talrijke effectieve API’s is het experimenteren met deze nieuwe mogelijkheden veel eenvoudiger dan je misschien denkt. Zonder de (ingewikkelde) techniek erachter te snappen, kun je simpelweg beelden laten analyseren en deze analyse verder gebruiken in je applicatie. Met de Computer Vision van Microsoft Azure Cognitive Services kun je bijvoorbeeld snel redelijk accurate beschrijvingen van beelden genereren. Handig als je bijvoorbeeld automatisch zoektermen wil toevoegen aan op je website geplaatste beelden. Of simpelweg een alt-tekst van je beeld wilt genereren voor betere SEO resultaten.
Bron: Eigen demo omgeving en South Coast Herald
De API’s van Kairos en Amazon Rekognition zijn erg sterk in het herkennen van gezichten en emoties. Wellicht om de reactie van app-gebruikers op pushberichten of video’s te monitoren? De Vision API van Google is sterk in het herkennen van landmarks. Een prachtige toepassing om klanten van reisorganisaties of gebruikers van reisapps een extra relevante ervaring te bieden? Hieronder vind je een opsomming van een aantal krachtige API’s met hun mogelijkheden, die met de tijd nog altijd toenemen.
Bron: Activewizards.com
Het aantal use cases is zeer divers, en nemen dankzij de snel ontwikkelende technologie (zowel kunstmatige intelligentie als andere relevante technologieën) alleen maar verder toe. Bovendien zijn al die verschillende mogelijkheden dankzij de verschillende API’s waarschijnlijk veel eenvoudiger te realiseren dan je mogelijk denkt. Hoog tijd dus om je te verdiepen in de mogelijkheden, te beginnen met experimenteren en zo te kijken hoe met deze spannende nieuwe technologie waarde kun toevoegen voor jouw organisatie, medewerkers of klanten.
Dit artikel is geschreven in samenwerking met Connected Content.