AI-VTubers: antwoorden op jullie vragen

Wat is een AI-VTuber?
In tegenstelling tot de gebruikelijke VTubers (virtuele YouTubers), die door mensen worden bestuurd en aangestuurd, zijn AI-VTubers virtuele YouTubers op basis van kunstmatige intelligentie die zelfstandig met kijkers kunnen communiceren op basis van een groot taalmodel (LLM). Ze kunnen in realtime reageren op het publiek en met hen communiceren, videogames spelen en persoonlijke anekdotes delen. Het mooiste is dat ze zich in de loop van de tijd kunnen ontwikkelen naarmate hun ontwikkelaars hen voorzien van bijgewerkte gegevens of een nieuw taalmodel.
Voor- en nadelen van AI-VTubers
- Voordelen: AI-VTubers worden aangestuurd door kunstmatige intelligentie en hebben tijdens livestreams geen crew nodig, waardoor er op personeelskosten wordt bespaard. De onvoorspelbaarheid van hun reacties houdt het publiek in spanning, omdat men zich afvraagt welke fantastische wendingen AI-VTubers straks weer zullen introduceren.
- Nadelen: Er bestaat momenteel geen AI-VTuber-generator die aan alle vereisten voldoet om een AI-VTuber te creëren. Het is een vrij complex proces dat veel inspanning vergt om de AI te trainen voordat deze aan het publiek kan worden gepresenteerd. Bovendien kan het ongefilterde taalgebruik, hoewel het als openhartig en eerlijk wordt beschouwd, als ongevoelig worden ervaren bij het bespreken van controversiële kwesties.
Wie is de eerste AI-VTuber?
Neuro-sama is de eerste AI-VTuber die is gemaakt door computerprogrammeur en AI-ontwikkelaar Jack Vedel. Ze werd aanvankelijk ontwikkeld om het ritmespel Osu! te spelen en later ook Minecraft, maar Neuro-sama kan interactie aangaan met haar kijkers door vragen te beantwoorden of spontaan allerlei uitspraken te doen. Met haar ongefilterde manier van uitdrukken veroverde ze de Twitch-wereld in een mum van tijd. Neuro-sama heeft een directe maar beleefde houding, wat een intrigerend contrast vormt met het onvoorspelbare karakter van haar uitspraken.
AI-VTubers die de moeite waard zijn om eens te bekijken
Naast Neuro-sama, de allereerste AI-VTuber die eerder werd genoemd, zijn hier nog een paar andere AI-VTubers die de moeite waard zijn om eens te bekijken.
1. Hilda

(Bron: Hilda Ch. AI-VTuber )
Hilda, die ontstond onder invloed van de razendsnel groeiende populariteit van Neuro-sama, is een Engelssprekende AI-VTuber. Bij haar ontwikkeling werd gestreefd naar vernieuwing door haar code voor iedereen open source te maken. Hilda beschikt over de vaardigheden om gesprekken te voeren, te reageren met haar Text-to-Speech-stem (TTS), te zingen, een langetermijngeheugen te hebben en visuele feedback te geven op basis van haar gesimuleerde „emoties“.
2. Ubi-chan

(Bron: Ubitus)
Ubi-chan, die pas een maand geleden haar debuut maakte, maakt gebruik van de AI-technologie van Uibitus, waaronder Retrieval-augmented Generation (RAG). Ze blinkt uit in anime-concepten en gesprekken, en op haar YouTube-kanaal staan vooral originele muziekvideo’s en dansroutines centraal, waarbij voor de muziek, de songteksten en de choreografie gebruik wordt gemaakt van AI.
3. Camila

(Bron: Typecast)
Je komt niet vaak VTubers tegen in anime-stijl die niet uit Japan komen, maar Camila onderscheidt zich door haar donkere huidskleur. Aangedreven door ChatGPT streamt ze 24/7 op het Typecast Global Channel. Met behulp van de Camila Voicebank schakelt ze naadloos tussen verschillende AI-stemmen, waardoor ze haar publiek een vermakelijke en leerzame ervaring biedt.
4. Kizuna AI

(Bron: Fandom)
Als een van de eerste virtuele YouTubers maakt Kizuna AI gebruik van geavanceerde AI-technologieën om haar publiek te boeien met een mix van entertainment en interactieve content. Ze staat bekend om haar levendige persoonlijkheid en blinkt uit in het brengen van content met een anime-thema en boeiende gesprekken. Op haar YouTube-kanaal zijn diverse originele muziekvideo’s en dansoptredens te zien, waarin door AI gegenereerde muziek, songteksten en choreografieën worden getoond, die haar wereldwijde fanbase blijven boeien.
Hoe maak je een AI-VTuber?
- Bepaal allereerst, wanneer je je AI-VTuber creëert, wat zijn of haar persoonlijkheid, uiterlijk en achtergrondverhaal zijn. Houd rekening met de specifieke doelgroep die je wilt aanspreken en stem het personage af op hun voorkeuren.
- Ten tweede: maak een avatar die past bij de persoonlijkheid van je VTuber. Tools zoals VRoid Studio, VIVERSE Avatar Creator of Live 2D Cubism kunnen hierbij van pas komen, omdat je hiermee schattige, cartooneske personages kunt maken.
- Kies vervolgens een AI-platform of -framework voor je AI-VTuber, zoals GPT (Generative Pre-trained Transformer) van OpenAI, Unity ML-Agents of andere veelzijdige machine learning-frameworks.
- Zorg er vervolgens voor dat er tijdens het trainingsproces van de AI gebruik wordt gemaakt van een uitgebreide en gevarieerde dataset, zodat een breed spectrum aan spraakpatronen en gedragingen wordt vastgelegd. Deze aanpak vergroot het aanpassingsvermogen van je AI-VTuber, waardoor deze een breder publiek kan aanspreken door rekening te houden met taalkundige en gedragsmatige diversiteit.
- Koppel vervolgens je AI-model aan de streamingsoftware om de bewegingen en gezichtsuitdrukkingen van de virtuele avatar te synchroniseren met je spraak en handelingen.
- Kies ten slotte een spraaksynthesesysteem dat past bij het personage van je VTuber. Je kunt gebruikmaken van tools zoals Google Text-to-Speech of gespecialiseerde spraaksyntheseprogramma’s zoals voice.ai. Vergeet niet de stemparameters aan te passen aan het personage van je VTuber, zoals toonhoogte, spreeksnelheid en intonatie.
Is Neuro-sama een echte AI?
Zeker. Neuro-sama maakt voornamelijk gebruik van computersoftware om activiteiten tijdens de livestream uit te voeren, zoals spreken, zingen, bewegen en gamen. Dit staat in contrast met het feit dat ze rechtstreeks door een mens wordt bestuurd. Twitch heeft haar verbannen vanwege haatdragend gedrag, dat werd toegeschreven aan controversiële uitspraken van de AI, zoals het in twijfel trekken van de authenticiteit van de Holocaust tijdens een livestream.
Is Kizuna AI een echte AI?
Hoewel Kizuna AI beweert een onafhankelijke kunstmatige intelligentie te zijn, wordt ze sinds haar debuut rechtstreeks beheerd door het bedrijf dat haar heeft gecreëerd, Activ8. Later viel ze onder het beheer van het eigen bureau van dat bedrijf, upd8, en van Kizuna AI Inc., voordat ze een pauze inlaste. Bovendien werd bekendgemaakt dat de Japanse stemactrice Kasuga Nozomi de stem van Kizuna AI verzorgt. Hoewel Kizuna AI dus weliswaar als ’s werelds eerste VTuber kan worden beschouwd, voldoet ze strikt genomen niet helemaal aan de definitie van een AI-VTuber.