bol

Magie aangedreven door AI

Vanaf de intocht van Sinterklaas tot aan pakjesavond is het Sinterklaasfeest voor kinderen altijd een spannend en vreugdevol moment om naar uit te kijken. Afgelopen jaar lag de focus van de bol-campagne op de gedachte: ‘hoe dichter je bij de Sint komt, des te magischer het wordt’. Door het HulpSint Platform toe te voegen aan de Grote Speelgoed App, maakten we het voor ouders nog makkelijker om kinderen een onvergetelijke ervaring te bieden. Ze konden nu eenvoudig persoonlijke spraakberichten van de Sint ontvangen, ontwikkeld door AI-technologie.

Text-to-speech

Met de Grote Speelgoed App konden kinderen niet alleen hun favoriete speelgoed ontdekken, maar ook digitale verlanglijstjes samenstellen. De ambitie voor bol in 2023 was om de app uit te breiden, zodat kinderen samen met hen de magie van Sinterklaas konden ervaren, terwijl ouders nog meer gemak geboden werd. Een van de uitdagingen was: kunnen we ieder kind audioberichten van de Sint sturen door een menselijke Sinterklaasstem te ontwikkelen en deze op te schalen naar persoonlijke boodschappen? Met de AI-technologie van text-to-speech zijn we erin geslaagd om berichten van de Sint tot leven te brengen. 

Onze aanpak

Het Hulpsint-platform
Het Hulpsint-platform bood ouders de mogelijkheid om via templates eenvoudig persoonlijke boodschappen voor hun kinderen te creëren. Of het nu was om te complimenteren, te bedanken of aan te kondigen dat ze hun schoen mochten zetten, deze teksten werden automatisch omgezet naar spraakberichten. Ouders konden deze beluisteren en inplannen om naar de Grote Speelgoedboek App te sturen. Hierdoor ontving ieder kind een uniek bericht van de Sint in hun digitale schoentje. Daarnaast verschafte het platform inzicht in de verlanglijstjes van kinderen, waardoor ouders moeiteloos via bol hun cadeaus konden bestellen.

Azure Custom Neural Voice
Dankzij het gebruik van Azure Custom Neural Voice hebben we met behulp van een stemacteur een hoogwaardige, synthetische sinterklaasstem ontwikkeld, zonder dat daar duizenden uren aan spraakgegevens voor nodig waren. Azure Custom Neural Voice maakt gebruik van een basismodel dat getraind wordt met uitgebreide datasets. Met slechts twee uur aan gegevens kan dit model aangepast worden om een hoogwaardig, op maat gemaakt model te genereren dat precies klinkt zoals de oorspronkelijke opnames. Bovendien is de tool schaalbaar en geautomatiseerd, waardoor we honderden voorbeelden konden ontwikkelen, volledig aangestuurd door andere enterprise-systemen.

Responsible AI
Bij de uitbreiding van de Grote Speelgoedboek App was een van onze voornaamste doelen om verantwoordelijk met AI om te gaan en ethische overwegingen met betrekking tot de technologie te waarborgen. Hierbij hebben we de Responsible AI principes van DEPT® en Microsoft als leidraad gebruikt. Het concept van een closed-editor design werd toegepast, waarbij de focus lag op de ontwikkeling van trainingdata en de optimalisatie van geluidskwaliteit. De scripts voor de stemacteur zijn vervaardigd met GPT-modellen. Door het zorgvuldig checken en evalueren van het model hebben we de stem van Sinterklaas geoptimaliseerd tot het beoogde resultaat. Tevens hebben we de output getest en aangepast voor verschillende scenario’s, waardoor deze breed inzetbaar is.

AI-aangedreven magie

Door het innovatieve gebruik van text-to-speech hebben we een uniek en schaalbaar model ontwikkeld, waarmee gepersonaliseerde berichten naar kinderen verstuurd konden worden om het Sinterklaasfeest nog magischer te maken. De text-to-speech-functie resulteerde in 183K luisteraars in de Grote Speelgoed App en maar liefst 1,4M beluisterde berichten. Deze indrukwekkende cijfers geven aan dat zowel ouders als kinderen actief gebruik hebben gemaakt van deze functie.

Vragen?

Data Scientist

Rick van Sintmaartensdijk

Ontdek meer

Next project

bol

Een unieke 3D-belevingswereld voor bol.com

View Work