essence

Kenna, der erste KI-gesteuerte virtuelle Beauty Assistant

Transcript

Hi, I’m Kenna, the AI powered virtual assistant by International Beauty brand essence. I’m the first of my kind and super excited to meet you. essence developed me to shift from a performance focused to an experience focused strategy, aligning with their claim to make beauty fun by launching an AI enabled virtual assistant (AKA me). essence aims to enhance the customer engagement and spark passion for the brand among Gen Z. My role is being the enabler, connector, and cheerleader for the essence community, offering advice on new products and beauty trends through fun, easy conversations. I was first brought to life in Spring 2024 and debuted at OMR Festival where visitors interacted with me in their native languages, experiencing a 3D real-time virtual beauty assistant for the first time. essence and Dept brought me to life using advanced technologies. I have a custom built GPT Brain Open AI whisper-powered ears for multilingual understanding, and a custom voice from 11 labs, 30% based on an essence employee’s voice. My 3D Body is real time ready and reacts to conversations with custom gestures, making interactions lively and engaging. As an AI microservice, I can be deployed across various platforms by combining these multiple technologies. I’m one of the first prototypes that gives AI a space, voice and body. How cool is that? So what’s next? As a new addition to essence, I will soon be integrated across multiple channels, including our website, retail, POS, and social platforms. You might even see me at an event, so keep your eyes peeled. And as technology evolves, essence and Dept will keep me updated on the latest AI features so I can continue to help customers and make beauty fun.

(  Services  )

  • AI Transformation
  • Customer Experience

Mit dem Ziel, globaler Marktführer in der Beauty Branche zu werden, verabschiedet sich essence von einer rein performance-orientierten Strategie und setzt verstärkt auf eine Strategie, die auf die Experience der Marke ausgerichtet ist. 

Um sich zu profilieren, investiert die Marke in aufstrebende Technologien, darunter eine KI-gestützte virtuelle Assistentin namens Kenna, die DEPT® mit Leidenschaft konzipiert und entwickelt hat.

Kenna’s Rolle bei der Entwicklung einer einzigartigen Experience

Ausgehend von der neuen digitalen Strategie von essence und dem Markenversprechen „Make Beauty Fun“ war für uns klar, dass die Zukunft in der Innovation und in neuen Technologien liegt. Zum Glück ist Innovation für essence kein Fremdwort. In der Vergangenheit hat das Unternehmen bereits erfolgreich Pionierarbeit mit Roblox Experiences und der Produktion von CGI-Inhalten geleistet. 

Ende 2023 entwickelten DEPT® und essence gemeinsam eine Strategie für einen neuen Touchpoint der Marke: ein virtueller Beauty Assistant. Genauer gesagt, ein KI-gestützter virtueller Beauty Assistant namens Kenna.

Kenna soll die essence-Community unterstützen, verbinden und anfeuern – und zwar, indem sie im direkten Austausch mit den Konsument:innen steht und sich mit ihnen unterhält. Mit ihrer Fähigkeit, Ratschläge zu geben, kann sie den essence Kund:innen dabei helfen, neue Produkte und Beauty Trends auf unterhaltsame und einfache Weise kennenzulernen und zu entdecken. 

Als neuer Conversational Layer in der Experience Strategie von essence wird Kenna in mehrere Kanäle integriert werden, darunter die Website, soziale Netzwerke, Events und POS.

Kenna’s Anatomie 

Um Kenna zum Leben zu erwecken, haben wir neueste Technologien miteinander kombiniert und so den ersten Prototypen entwickelt, der KI ein Gesicht, eine Stimme und einen Körper gibt – genau so, wie wir uns die Zukunft von KI-Assistants vorstellen: ein super smarter Helfer mit menschlichem Touch.

Kenna’s Gehirn: Das GPT basiert auf dem proprietären Gen AI Product Development Framework von DEPT®. Diese Plattform ist ein maßgeschneidertes KI-System inklusive Wissensdatenbanken, Produkt-Feed-Integration und Leitplanken – ein vollständig individuell angepasstes Brand Language Model. 

Kenna’s Ohren: OpenAI Whisper ermöglicht es ihr, Voice Requests von Nutzer:innen (in jeder Sprache) zu hören und diese im Kontext zu verstehen. 

Kenna’s Stimme: Mit Hilfe von ElevenLabs wurde eine custom-made Stimme erstellt, welche zu 30 % auf der Stimme einer essence Mitarbeiterin basiert. 

Kenna’s Körper: Wir haben zudem einen 3D-Charakter entwickelt, der “real-time-ready” ist. Das bedeutet, dass Kenna auf Unterhaltungen mit einer Reihe von individuellen Gesten reagiert. 

Um das Ganze abzurunden, ist Kenna außerdem ein KI-Microservice, der es ihr ermöglicht, in verschiedenen Plattformen integriert zu werden. 

Kenna IRL treffen

Kenna feierte ihr Debüt beim OMR Festival im Frühjahr 2024 und hat große Pläne für die Zukunft. 

Mithilfe einer interaktiven Installation waren die OMR Besucher:innen in der Lage sich mit Kenna in ihrer Muttersprache zu unterhalten. Kenna verstand alles und reagierte in Gen Z-Manier – begleitet von Mimik, Gestik und Lippensynchronisation.

Dieser Launch markierte einen Meilenstein, da er für die meisten Nutzer:innen die erste Gelegenheit bot, mit einem virtuellen 3D-Beauty-Assistenten in Echtzeit zu interagieren.

Was steht als nächstes für Kenna an? Unsere ambitionierte Roadmap sieht vor, sie auf der essence-Website zu integrieren, weitere Live-Events (z. B. Festivals) durchzuführen und Kenna mit den Retail POS-Systemen zu verbinden.

Da die Technologie sich ständig weiterentwickelt, wird die Optimierung ein fortlaufender Prozess sein. Wir arbeiten weiterhin eng mit essence zusammen, um Kenna in das digitale Ökosystem der Marke zu integrieren und zu innovieren. 

Awards & recognition

Award

Year

Category

Lovie Awards

2024

AI, Web3 & XR: Technical Achievement

Credits

Director Emerging Tech

Jan Gutkuhn

Creative Developer

Chris Lutz-Weicken

UX & Conversational Designer

Nadja Aschmann

Developer

Eike Hannes Meyer-Stadtmüller

UI Designer

Veronica Broll

Producer

Nadine Klein

Sie möchten auch eine KI-gestützte Experience für Ihre Marke entwickeln? Unser AI Transformation Team kann Ihnen dabei helfen.

Next project

GANNI

Kuratierte Showrooms für jede Kollektion

View Work