ВТюберы с ИИ: ответы на ваши вопросы
Что такое AI-VTuber?
В отличие от обычных VTubers (виртуальных ютуберов), которыми управляют и которых ведут люди, AI VTubers — это виртуальные ютуберы на базе искусственного интеллекта, способные самостоятельно взаимодействовать со зрителями на основе большой языковой модели (LLM). Они могут отвечать на вопросы и общаться с аудиторией в режиме реального времени, играть в видеоигры и делиться личными историями. И что самое важное, они способны развиваться со временем по мере того, как их разработчики пополняют их обновлёнными данными или усовершенствованной языковой моделью.
Плюсы и минусы VTubers с искусственным интеллектом
- Преимущества: Благодаря управлению с помощью ИИ, ИИ-ВТуберы не нуждаются в съемочной группе во время прямых трансляций, что позволяет сократить расходы на оплату труда. Непредсказуемость их ответов держит зрителей в напряжении, заставляя гадать, какие фантастические повороты сюжета ИИ-ВТуберы могут предложить в следующий раз.
- Недостатки: На данный момент не существует генератора ИИ-VTuber, способного удовлетворить всем требованиям, необходимым для создания ИИ-VTuber. Это довольно сложный процесс, требующий значительных усилий для обучения ИИ перед его представлением публике. Кроме того, нецензурное использование языка, хотя и считается откровенным и честным, может восприниматься как нетактичное при обсуждении спорных вопросов.
Кто стал первым VTuber-искусственным интеллектом?
Neuro-sama — первая VTuber с искусственным интеллектом, созданная программистом и разработчиком ИИ Джеком Веделем. Первоначально она была создана для игры в ритм-игру «Osu!», а позже — в «Minecraft». Neuro-sama может взаимодействовать со своими зрителями, отвечая на вопросы или спонтанно произнося различные высказывания. Своим непосредственным поведением она буквально покорила мир Twitch. Neuro-sama отличается прямым, но вежливым поведением, что создаёт интригующий контраст с непредсказуемостью её высказываний.
ВТюберы с ИИ, на которых стоит обратить внимание
Помимо Neuro-сама, первого в истории VTuber с искусственным интеллектом, о котором упоминалось ранее, вот ещё несколько VTuber с искусственным интеллектом, на которых стоит обратить внимание.
1. Хильда
(Источник: Хильда Ч., VTuber с искусственным интеллектом )
Хильда — англоязычная ИИ-витубер, появившаяся на свет на волне стремительно растущей популярности Нейро-сама. Её разработка была направлена на то, чтобы открыть новые горизонты, сделав её исходный код доступным для всех. Хильда обладает способностью участвовать в чатах, отвечать с помощью функции преобразования текста в речь (TTS), петь, сохранять долговременную память и передавать визуальную обратную связь на основе своих симулированных «эмоций».
2. Уби-чан
(Источник: Ubitus)
Ubi-chan, дебютировавшая всего месяц назад, использует технологии искусственного интеллекта компании Uibitus, в том числе технологию RAG (Retrieval-augmented Generation). Она отлично справляется с аниме-концепциями и диалогами, а на её канале в YouTube представлены оригинальные музыкальные клипы и танцевальные номера, в которых ИИ используется для создания музыки, текстов песен и хореографии.
3. Камила
(Источник: Typecast)
Нечасто встретишь VTuber в стиле аниме, не являющихся японцами, но Камила выделяется своим смуглым оттенком кожи. Благодаря технологии ChatGPT она ведёт круглосуточные трансляции на канале Typecast Global Channel. Используя голосовой банк Camila Voicebank, она плавно переключается между различными голосами искусственного интеллекта, создавая для своей аудитории увлекательное и познавательное зрелище.
4. Kizuna AI
(Источник: Fandom)
Будучи одной из первых виртуальных ютуберок, Kizuna AI использует передовые технологии искусственного интеллекта, чтобы привлекать зрителей сочетанием развлекательного и интерактивного контента. Известная своей яркой индивидуальностью, она преуспевает в создании контента на тему аниме и ведении увлекательных бесед. На её канале YouTube представлен широкий спектр оригинальных музыкальных клипов и танцевальных выступлений, в которых демонстрируются созданные с помощью искусственного интеллекта музыка, тексты песен и хореография, что продолжает завораживать её поклонников по всему миру.
Как создать VTuber с искусственным интеллектом?
- Во-первых, при создании своего VTuber с искусственным интеллектом определитесь с его характером, внешностью и предысторией. Учтите особенности аудитории, которую вы намерены привлечь, и адаптируйте образ персонажа так, чтобы он соответствовал её предпочтениям.
- Во-вторых, создайте аватар, который будет соответствовать личности вашего VTuber. Такие инструменты, как VRoid Studio, VIVERSE Avatar Creator или Live 2D Cubism, могут оказаться весьма полезными, поскольку позволяют создавать очаровательных мультяшных персонажей.
- Далее выберите платформу или фреймворк искусственного интеллекта для вашего VTuber с ИИ, например GPT (Generative Pre-trained Transformer) от OpenAI, Unity ML-Agents или другие универсальные фреймворки машинного обучения.
- После этого убедитесь, что в процессе обучения ИИ используется всеобъемлющий и разнообразный набор данных, позволяющий охватить широкий спектр речевых моделей и поведенческих паттернов. Такой подход повышает адаптивность вашего ИИ-VTuber, позволяя ему найти отклик у более широкой аудитории за счет учета лингвистического и поведенческого разнообразия.
- Затем подключите свою модель искусственного интеллекта к программному обеспечению для стриминга, чтобы синхронизировать движения и мимику виртуального аватара с вашей речью и действиями.
- И, наконец, выберите систему синтеза речи, которая будет соответствовать образу вашего VTuber. Вы можете воспользоваться такими инструментами, как Google Text-to-Speech, или специализированными программами синтеза речи, например voice.ai. Не забудьте настроить параметры голоса в соответствии с характером вашего VTuber, включая высоту тона, скорость речи и тембр.
Является ли Нейро-сама настоящим искусственным интеллектом?
Безусловно. Neuro-sama в основном использует компьютерное программное обеспечение для выполнения действий во время прямых эфиров, таких как речь, пение, движения и игры. Это отличается от прямого управления со стороны человека. Платформа Twitch заблокировала её за участие в действиях, разжигающих ненависть, что было связано со спорными заявлениями ИИ, например, с высказываниями, ставящими под сомнение факты Холокоста во время прямого эфира.
Является ли Kizuna AI настоящим искусственным интеллектом?
Хотя Кизуна АИ заявляет, что является независимым искусственным интеллектом, с момента своего дебюта она находилась под непосредственным управлением компании Activ8, создавшей её. Позже, до ухода на перерыв, ею занимались её собственное агентство upd8 и компания Kizuna AI Inc. Кроме того, стало известно, что голос Kizuna AI озвучивает японская актриса озвучивания Касуга Нозоми. Таким образом, хотя Kizuna AI и может считаться первой в мире VTuber, она, так сказать, не совсем соответствует определению VTuber с искусственным интеллектом.
