Les VTubers générés par l’IA : réponses à vos questions

Qu’est-ce qu’un VTuber IA ?

Grâce à l’IA, contrairement aux VTubers (YouTubers virtuels) habituels contrôlés et pilotés par des humains, les VTubers IA sont des YouTubers virtuels basés sur l’intelligence artificielle, capables d’interagir de manière autonome avec les spectateurs grâce à un modèle linguistique de grande envergure (LLM). Ils peuvent répondre et échanger avec le public en temps réel, jouer à des jeux vidéo et partager des anecdotes personnelles. Mieux encore, ils peuvent évoluer au fil du temps à mesure que leurs développeurs leur fournissent des données actualisées ou un nouveau modèle linguistique.

Avantages et inconvénients des VTubers générés par l’IA

• Avantages : pilotés par l’IA, les VTubers IA ne nécessitent pas d’équipe technique pendant les diffusions en direct, ce qui permet de réaliser des économies sur les coûts de main-d’œuvre. Le caractère imprévisible de leurs réponses tient le public en haleine, qui se demande quels rebondissements fantastiques les VTubers IA pourraient bien lui réserver ensuite.
• Inconvénients: Il n’existe actuellement aucun générateur de VTuber basé sur l’IA capable de répondre à toutes les exigences nécessaires à la création d’un VTuber de ce type. Il s’agit d’un processus assez complexe qui nécessite un effort considérable pour entraîner l’IA avant de la présenter au public. De plus, l’utilisation d’un langage sans filtre, bien que considérée comme franche et honnête, pourrait être perçue comme un manque de tact lors de discussions sur des sujets controversés.

Qui est le premier VTuber basé sur l’IA ?

Neuro-sama est la première VTuber dotée d’une intelligence artificielle créée par Jack Vedel, programmeur informatique et développeur en IA. Initialement conçue pour jouer au jeu de rythme Osu ! puis à Minecraft, Neuro-sama peut interagir avec ses spectateurs en répondant à leurs questions ou en prononçant spontanément toute une série de remarques. Elle a pris d’assaut l’univers de Twitch grâce à son franc-parler. Neuro-sama se distingue par un comportement direct mais courtois, créant un contraste intrigant avec le caractère imprévisible de ses propos.

Des VTubers générés par l’IA à découvrir

Outre Neuro-sama, la toute première VTuber basée sur l’IA mentionnée plus haut, voici quelques autres VTubers basées sur l’IA qui méritent le détour.

1. Hilda

(Source : Hilda Ch., VTuber IA )

Née dans le sillage de la renommée fulgurante de Neuro-sama, Hilda est une VTuber dotée d’une intelligence artificielle et s’exprimant en anglais. Son développement visait à innover en rendant son code open source et accessible à tous. Hilda est capable de participer à des discussions, de répondre grâce à sa synthèse vocale (TTS), de chanter, de conserver une mémoire à long terme et de transmettre des réactions visuelles basées sur ses « émotions » simulées.

2. Ubi-chan

(Source : Ubitus)

Lancée il y a tout juste un mois, Ubi-chan s’appuie sur la technologie d’IA d’Uibitus, notamment la « Retrieval-augmented Generation » (RAG). Spécialisée dans les concepts liés à l’anime et les conversations, sa chaîne YouTube met en avant des clips musicaux et des chorégraphies originaux, tous créés à l’aide de l’IA pour la musique, les paroles et la chorégraphie.

3. Camila

(Source : Typecast)

On rencontre rarement des VTubers de style anime qui ne sont pas japonaises, mais Camila se distingue par son teint mat. Grâce à ChatGPT, elle diffuse en continu, 24 heures sur 24 et 7 jours sur 7, sur la chaîne Typecast Global. À l’aide de la banque de voix « Camila Voicebank », elle passe sans difficulté d’une voix IA à l’autre, offrant ainsi à son public une expérience à la fois divertissante et instructive.

4. Kizuna AI

(Source : Fandom)

Comptant parmi les premières YouTubeuses virtuelles, Kizuna AI utilise des technologies d’IA de pointe pour captiver son public grâce à un mélange de divertissement et de contenu interactif. Réputée pour sa personnalité dynamique, elle excelle dans la création de contenus sur le thème des anime et dans les conversations captivantes. Sa chaîne YouTube propose une grande variété de clips musicaux et de numéros de danse originaux, mettant en avant une musique, des paroles et des chorégraphies générées par l’IA, qui ne cessent de captiver ses fans du monde entier.

Comment créer un VTuber basé sur l’IA ?

1. Tout d’abord, lorsque vous créez votre VTuber IA, définissez sa personnalité, son apparence et son histoire. Tenez compte du public spécifique que vous souhaitez séduire et adaptez son personnage afin qu’il corresponde à ses préférences.
2. Deuxièmement, créez un avatar qui corresponde à la personnalité de votre VTuber. Des outils tels que VRoid Studio, VIVERSE Avatar Creator ou Live 2D Cubism peuvent s’avérer très utiles, car ils vous permettent de créer d’adorables personnages de style cartoon.
3. Choisissez ensuite une plateforme ou un framework d’IA pour votre VTuber basé sur l’IA, tel que le GPT (Generative Pre-trained Transformer) d’OpenAI, Unity ML-Agents ou d’autres frameworks polyvalents d’apprentissage automatique.
4. Par la suite, veillez à utiliser un ensemble de données complet et varié lors du processus d’entraînement de l’IA afin de prendre en compte un large éventail de schémas linguistiques et de comportements. Cette approche renforce la capacité d’adaptation de votre VTuber basé sur l’IA, ce qui lui permet de trouver un écho auprès d’un public plus large en tenant compte de la diversité linguistique et comportementale.
5. Ensuite, connectez votre modèle d’IA au logiciel de streaming afin de synchroniser les mouvements et les expressions de l’avatar virtuel avec votre discours et vos gestes.
6. Enfin, choisissez un système de synthèse vocale qui corresponde à la personnalité de votre VTuber. Vous pouvez utiliser des outils tels que Google Text-to-Speech ou des logiciels de synthèse vocale spécialisés comme voice.ai. N’oubliez pas d’ajuster les paramètres vocaux afin qu’ils correspondent au personnage de votre VTuber, notamment la hauteur, la vitesse et le timbre.

Neuro-sama est-il une véritable IA ?

Tout à fait. Neuro-sama utilise principalement des logiciels informatiques pour mener à bien ses activités en direct, telles que parler, chanter, bouger et jouer à des jeux. Cela contraste avec le fait d’être directement contrôlée par un être humain. Twitch l’a bannie pour avoir tenu des propos haineux, attribués à des déclarations controversées faites par l’IA, telles que la remise en cause de l’authenticité de l’Holocauste lors d’un live.

Kizuna AI est-elle une véritable intelligence artificielle ?

Bien que Kizuna AI se présente comme une intelligence artificielle indépendante, elle a été directement gérée par la société qui l’a créée, Activ8, depuis ses débuts. Par la suite, elle a été placée sous la gestion de l’agence interne de cette dernière, upd8, puis de Kizuna AI Inc., avant de faire une pause. Par ailleurs, il a été révélé que c’est la comédienne de doublage japonaise Kasuga Nozomi qui prête sa voix à Kizuna AI. Par conséquent, bien que Kizuna AI puisse être considérée comme la première VTuber au monde, elle ne correspond pas tout à fait à la définition d’une VTuber IA, pour ainsi dire.

Créez votre personnage de VTuber