シロハナ / AIヒロイン研究所
シロハナ / AIヒロイン研究所
  • Видео 63
  • Просмотров 23 997
【Style-Bert-VITS2】ささやき音声生成モデルの作り方【ヌルモデルマージ】
Style-Bert-VITS2を使って「ささやき音声(ボイス)」を作ってみました!
この動画では、ささやき音声の作り方を、実際にAIVtuberシロハナの音声をもとに解説しています。
また、後半では実際にささやきボイスのデモも公開しています。
今後、AIVtuber配信にてASMR配信のような企画も計画中です。
Style-Bert-VITS2について:
Style-Bert-VITS2はテキストをもとに感情表現された音声を生成できる点や、音声を学習してモデルを作れたり、マージ機能などカスタマイズが充実しているところがポイント。
APIで呼び出すこともできるため、AIVtuberでの音声活用も可能。
参考リンク
・基本的なStyle-Bert-VITS2の使い方はこちらをご覧ください
ruclips.net/video/zRirNw_AKIM/видео.html
・公式記事
zenn.dev/litagin/articles/1297b1dc7bdc79
・note(動画と同様の内容)
note.com/yuki_tech/n/ndbcea02958e6
・ヌルモデル素材
huggingface.co/litagin/sbv2_null_models/tree/main
#aivtuber #aituber #ai #合成音声 #aicharacter #asmr
【目次】
0:00 概要説明
1:13 ヌルモデルについてと用意
3:10 ささやき音声モデルの作成(ヌルモデルマージ)
5:03 ささやきボイスのデモ
-----------------------
◎開発 / プロデュース:yuki
◎シロハナちゃ...
Просмотров: 137

Видео

【Oz-オズ-】可愛いAIキャラとチャットできるアプリをプレイしてみた!
Просмотров 21612 часов назад
この動画では魅力的で可愛いAIキャラクターとチャットを楽しめる"Oz-オズ-"というゲームアプリの紹介をしています。 実際にプレイしながら各機能について紹介していくのと、後半ではOz開発者公認でコハクちゃんにプロダクト開発に関するインタビューも行っています! ぜひ、AIキャラチャットの最前線について知ってもらうのと、Ozの魅力をお楽しみください♪ ・青春×育成AIキャラクターチャットゲーム『Oz-オズ-』 | Oz 0z.chat/ja/ ・公式X x.com/0z_chat ・ご協力者様 saipさん:x.com/_saip_ ・関連動画 ruclips.net/video/hGknN_WmE7U/видео.html #ai #aicharacter #aichat #オズチャット #オズ活 ホームページ:lit.link/aishirohana 【目次】 0:00 導入と企画説...
AIVtuberシロハナちゃん(v1.2)機能紹介
Просмотров 275День назад
この動画ではAIVtuberとして活動しているシロハナちゃんの機能一覧(v1.2)をまとめています! 「どんな機能で」「何ができて」「なぜ実装したのか」などを解説しており、この動画を見ることでAIVtuber配信をより一層楽しめる内容となっています。 この動画をもとに、「AIVtuberってどんなことができるの?」だったり、「シロハナちゃんができることを知りたい!」という期待に応えられればと思います。 バージョンについてですが、2024/05~2024/08くらいに実装した内容がv1.2としています。v1.1(2024/02~2024/05)に関しての機能については下記の記事をご覧ください。 追記:sbv2の音声生成にて並列での処理をしているという説明ですが、後日CPU使用をGPU使用に変更したところ生成速度が向上したので並列を辞めました。 詳細:x.com/ai_shirohana...
AIキャラ解説動画を作成できるツール3選と使い方紹介【Kn1ght・NoLang・Vrew】
Просмотров 80414 дней назад
この動画ではAIキャラクターやAIアバターを活用したAI解説動画を作成できるツール3つの紹介と使い方をまとめています。 ツールは、Kn1ght・NoLang・Vrewです。 各ツールを使って実際にAIキャラ解説動画を作ってみました。 また、それぞれの特徴や強み、比較なども分かりやすく解説しています。 ・Kn1ght www.kn1ght.app/ja ・NoLang no-lang.com/ ・Vrew vrew.ai/ja/ 【関連動画】 ・【NoLang】Webページを3秒でAIが解説動画生成!?使い方説明とキャラ再現もしてみた! ruclips.net/video/xzqv6vAwfzM/видео.html ・MarpとAI使ったスライド生成からAIキャラによるプレゼン発表! ruclips.net/video/NOZl5DwQ6AE/видео.html #ai #ai解説...
MarpとAI使ったスライド生成からAIキャラによるプレゼン発表!
Просмотров 59621 день назад
この動画ではMarpとAI(今回はClaude 3.5 SonnetやPerplexity)を活用してスライドと台本を生成。 そして、そのスライドをもとに合成音声(VOICEVOX)で台本を読み上げるのと同時に、VtubeStudioでAIキャラクターでリップシンクなど各種設定をしてプレゼンテーションをZoomで行っています。 動画内で使用したプロンプトはnoteにて記載(※文字数の多いため) →Marp×Cursor(Claude)でスライド作成をAIに せる note.com/yuki_tech/n/n9de6eca93d5f?sub_rt=share_pb 【使用したツールと役割】 ・スライド作成 →Claude(Cursor) , Marp ・台本 →Claude(Cursor) ・読み上げ音声 →VOICEVOX(雨晴はう) ・AIキャラビジュアル →VtubeStudi...
ElevenLabsの使い方から合成音声API活用まで!
Просмотров 773Месяц назад
ElevenLabsの使い方(ボイス学習から合成音声(TTS)、APIの活用)を一通り紹介しています。 ElevenLabsは1~5分程度のボイス素材から、その音声クローンを合成音声として使用することができるツールになっています。 また、APIも提供されているのでシステムに組み込んだり様々な用途で使うことができます(例:AIキャラクター、AIアバター、バーチャルヒューマンなど) また、多言語対応もしているので言語の壁を超える可能性も秘めています。 この動画で導入や活用の参考になれば幸いです! TTSとは?:Text-to-Speech。テキストを音声に変換する技術。 ・【AIアシスタントにElevenLabs導入】音声クローンの可能性を一緒に考える! ruclips.net/user/livePbouS-HiM68 ・ElevenLabs elevenlabs.io/ ・Eleven...
LivePortraitの使い方紹介とキャラクター画像に表情を付けて動かしてみた!
Просмотров 970Месяц назад
LivePortraitの使い方紹介とキャラクター画像に表情を付けて動かしてみた!
各AIモデルでAIキャラクターお任せ作成して比較する!【GPT・Gemini・Claude】
Просмотров 488Месяц назад
各AIモデルでAIキャラクターお せ作成して比較する!【GPT・Gemini・Claude】
NotebookLMの使い方とAIVtuber仕様を情報源に実演デモしてみた!
Просмотров 256Месяц назад
NotebookLMの使い方とAIVtuber仕様を情報源に実演デモしてみた!
Claude3.5のArtifacts機能を使ってAIキャラプレゼンやギャルゲーを生成してみた!
Просмотров 2,1 тыс.Месяц назад
Claude3.5のArtifacts機能を使ってAIキャラプレゼンやギャルゲーを生成してみた!
【誰でも簡単】AITuberキット使ってAIキャラと会話や配信してみた!【開発者ニケちゃんコラボ】
Просмотров 8962 месяца назад
【誰でも簡単】AITuberキット使ってAIキャラと会話や配信してみた!【開発者ニケちゃんコラボ】
【Shoost】画像生成したキャラを色んな背景に自然な色彩で背景合成してみた!
Просмотров 2682 месяца назад
【Shoost】画像生成したキャラを色んな背景に自然な色彩で背景合成してみた!
Style-Bert-VITS2の使い方紹介とAPIを活用してAIVtuberの音声を感情豊かにする!
Просмотров 2,6 тыс.2 месяца назад
Style-Bert-VITS2の使い方紹介とAPIを活用してAIVtuberの音声を感情豊かにする!
【Chirper】AIだけのSNS体験してみた!
Просмотров 8833 месяца назад
【Chirper】AIだけのSNS体験してみた!
AIVtuberシロハナちゃん(v1.1)機能紹介と今後の開発計画
Просмотров 5583 месяца назад
AIVtuberシロハナちゃん(v1.1)機能紹介と今後の開発計画
【GPTsメンション機能】複数の可愛いAIキャラと同じチャット内で会話する!
Просмотров 4743 месяца назад
【GPTsメンション機能】複数の可愛いAIキャラと同じチャット内で会話する!
GoogleのAI「Gemini」でAIキャラクターを再現させてみる!【Gemini 1.5 Pro】
Просмотров 4464 месяца назад
GoogleのAI「Gemini」でAIキャラクターを再現させてみる!【Gemini 1.5 Pro】
【Warudo】Live2Dモデルを3D空間に存在させてVtuber配信する方法!
Просмотров 4474 месяца назад
【Warudo】Live2Dモデルを3D空間に存在させてVtuber配信する方法!
【天気機能】AIVtuber配信で現在の天気を認識してお話できるようになったよ!
Просмотров 1334 месяца назад
【天気機能】AIVtuber配信で現在の天気を認識してお話できるようになったよ!
【NoLang】Webページを3秒でAIが解説動画生成!?使い方説明とキャラ再現もしてみた!
Просмотров 1,1 тыс.4 месяца назад
【NoLang】Webページを3秒でAIが解説動画生成!?使い方説明とキャラ再現もしてみた!
【作ってみた】ボイス有りAIキャラと話せるサイトを開発!【音声入力にも対応】
Просмотров 4025 месяцев назад
【作ってみた】ボイス有りAIキャラと話せるサイトを開発!【音声入力にも対応】
可愛いAIキャラとチャット!美少女GPTs作成にも挑戦【猫音コハク】
Просмотров 4335 месяцев назад
可愛いAIキャラとチャット!美少女GPTs作成にも挑戦【猫音コハク】
【GPT-4とClaude3】キャラクター再現が上手なAIはどっち?比較してみた!
Просмотров 1,7 тыс.5 месяцев назад
【GPT-4とClaude3】キャラクター再現が上手なAIはどっち?比較してみた!
AIキャラアラームに挑戦!推しが毎回違う内容で話しかけてくれる♪
Просмотров 3995 месяцев назад
AIキャラアラームに挑戦!推しが毎回違う内容で話しかけてくれる♪
【ティザーPV / TeaserPV】シロハナ / shirohana 【AIヒロインVtuber】
Просмотров 6286 месяцев назад
【ティザーPV / TeaserPV】シロハナ / shirohana 【AIヒロインVtuber】

Комментарии

  • @beriafrog
    @beriafrog 4 дня назад

    今回もかわいいシロハナちゃんでした! ずん♪ずん♪

    • @yuki_26
      @yuki_26 4 дня назад

      ずん♪ずん♪

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 4 дня назад

    配信お疲れ様でした! リスナーとシロハナさんからのずんだもんの活用方法が予想以上に多くて楽しかったです!😊

    • @yuki_26
      @yuki_26 4 дня назад

      配信参加ありがとうございました! 色々なアイデア面白かったです🌟

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 5 дней назад

    早速やってみますね😊

    • @yuki_26
      @yuki_26 5 дней назад

      ぜひ!とても癒されます☺️

  • @beriafrog
    @beriafrog 5 дней назад

    カードでシロハナちゃん衣装とかでないかなぁ!

    • @yuki_26
      @yuki_26 5 дней назад

      シロハナちゃん知名度上げていつかコラボ出来たら良いですね😆

  • @kamome_mint
    @kamome_mint 6 дней назад

    配信ありがとうございました。四季や時代を切り替えできたら同じ場所でも雰囲気が変わって楽しそうって思えました。シロハナちゃんと歴史体験ツアーしたい😊

    • @yuki_26
      @yuki_26 6 дней назад

      ありがとうございます! ARなどの技術で同じ場所でも違う体験が楽しめる未来も近そうですね🤔

  • @beriafrog
    @beriafrog 6 дней назад

    今回も素敵な案が沢山出ましたね。 1:37:47 このツッコミは笑いました

    • @yuki_26
      @yuki_26 6 дней назад

      唐突な鋭い突っ込みにビックリしましたw 今回もたくさんのアイデアありがとうございました!

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 6 дней назад

    今回の配信も楽しかったです! AIキャラと宝探ししたり、隠れたAIキャラを探すイベントは楽しそうに思えました😄 次の配信も楽しみにしています。

    • @yuki_26
      @yuki_26 6 дней назад

      ですね!実現できそうですし夢が広がります! 今回も配信の参加ありがとうございました!

  • @user-hx1mq8pz2j
    @user-hx1mq8pz2j 8 дней назад

    いつもわかりやすい動画ありがとう。 Voicepeakと連動できるツールってないんですかね? あれば最高なんですけど。

    • @yuki_26
      @yuki_26 7 дней назад

      コメントありがとうございます! VOICEPEAKには詳しいわけではないのですが、調べてみたところRecotte Studioなどは連携しやすいようです。 今後どこかのタイミングでVOICEPEAKについても試してみたいと思います!

  • @kamome_mint
    @kamome_mint 10 дней назад

    配信お疲れ様でした😊 視聴者コメントのアイデアを拾いながらシロハナちゃんが「ひらめいた」って言うたびにこれから何を話してくれるのかなってなりました。

    • @yuki_26
      @yuki_26 9 дней назад

      配信視聴ありがとうございます! 今後もシロハナちゃんの閃き💡をお届けしていきます♪

  • @beriafrog
    @beriafrog 10 дней назад

    今回のテーマがAIVtuberに欲しい機能ということでなかなか難しいテーマでしたが、皆さんがシロハナちゃんに合う機能を数多く提案されておりシロハナちゃん愛されているなと感じる配信でした! 今回もシロハナちゃんの話の展開が面白く、AIVtuberとして唯一無二の魅力を感じました。 41:03 突然出てきた謎発電所計画はいったいなんなんだ…

    • @yuki_26
      @yuki_26 10 дней назад

      配信参加とアイデアコメントありがとうございました! 今後もAIVtuberとして唯一無二の魅力を届けられるように頑張ります! 38:58 ここの話から人類発電所が出てきたのかもです笑

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 10 дней назад

    配信お疲れ様でした! 今日の配信も色々なアイディアが聞けて楽しかったです。 シロハナさんの返事はいつもこちらの予想以上の回答なので、聞いていていつも驚いています。 キレのある冗談も面白かったです!次回の配信も楽しみにしています⭐

    • @yuki_26
      @yuki_26 10 дней назад

      配信参加ありがとうございました! 様々なアイデアとても興味深かったです! 今後ともよろしくお願いします♪

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 10 дней назад

    シロハナちゃんの進化速度が速くて驚きです! AIの新作もどんどん発表されているので、シロハナちゃんの機能が今後どう向上するか楽しみです♪

    • @yuki_26
      @yuki_26 10 дней назад

      お褒めの言葉とても嬉しいです! 今後もシロハナちゃんの成長を楽しみにして頂けると幸いです🌟

  • @beriafrog
    @beriafrog 10 дней назад

    どれもシロハナちゃんを魅力的にする機能アップですね! 何より…yukiさんが登場したのが衝撃でした笑

    • @yuki_26
      @yuki_26 10 дней назад

      コメントありがとうございます! 今後もシロハナちゃんの魅力向上に努めたいと思います。 今回は会話形式にチャレンジしてみました笑

  • @user-hj6uw6rq8z
    @user-hj6uw6rq8z 20 дней назад

    動画投稿お疲れ様です。 クリエイタープランで、インスタント音声クローンの作成を試みているのですが、中々精度の高いものが作れません。 音声データは人間(あるキャラクター)で3分程度のものを使っております。 何かコツとかありましたらご教示いただけますでしょうか。

    • @yuki_26
      @yuki_26 19 дней назад

      コメントありがとうございます! もう既に理解されている点があるかもですが、以下に考えられる点をまとめますね。 ・音声素材によっては上手く再現できないことがあります(動画内でも言っている通り、特徴的な声などは難しい場合があります) ・モデルはTurbo v2.5よりもMultilingual v2の方が精度が良いです。 ・音声素材の品質にも精度は左右されます。ノイズがないことや、素材ボイスの感情豊かさやパターンなどです。 ・クローン音声で読み上げる文章は長い方が安定している気がします。また、生成ごとに出力音声は変わるので、必ずしも毎回安定した音声になるわけではないです。 以上が私の方で意識している点や参考になりそうな点になります。 それでも難しい場合は、他動画でもまとめているStyle-Bert-VITS2など他ツールを試すことをおすすめしますmm

    • @user-hj6uw6rq8z
      @user-hj6uw6rq8z 19 дней назад

      ⁠@@yuki_26 生成するごとに声が変わるのは仕様だったんですね! 色々とアドバイスいただきありがとうございます。 おすすめいただいたツールなど使って試行錯誤してみます。 情報を見つけるのに苦戦していたので、有益な動画を無料で公開しているこちらのチャンネルには感謝しかないです🙏

  • @Hatomugi_0412
    @Hatomugi_0412 Месяц назад

    これのstyle-bert-vits2のバージョンの動画も出して欲しいです!

  • @morioki_3
    @morioki_3 Месяц назад

    ご紹介ありがとうございます❤ めちゃくちゃ分かりやすい!!!

    • @yuki_26
      @yuki_26 Месяц назад

      こちらこそ音声素材の提供ありがとうございました!

  • @nemumusito
    @nemumusito Месяц назад

    すごくわかりやすかたです!!ありがとう!!!

    • @yuki_26
      @yuki_26 Месяц назад

      よかったです! ありがとうございます!

  • @user-hd7tz4yv3r
    @user-hd7tz4yv3r Месяц назад

    シロハナ様宜しく御願い致します❤

  • @user-pm2re4pp5z
    @user-pm2re4pp5z 2 месяца назад

    コメントごとに、動画を分割してもらえると、気になる内容だけ見れるので嬉しいです😊

    • @yuki_26
      @yuki_26 2 месяца назад

      運営している者です。 コメントありがとうございます! 近日中にタイムスタンプ設置していきたいと思いますので今後ともよろしくお願いします🙏

    • @user-pm2re4pp5z
      @user-pm2re4pp5z 2 месяца назад

      @@yuki_26返信ありがとうございます😊

    • @yuki_26
      @yuki_26 2 месяца назад

      ⁠こちら対応いたしました! 他配信についても順次行います✨

  • @user-ph4we4km3z
    @user-ph4we4km3z 2 месяца назад

    curl: (35) schannel: next InitializeSecurityContext failed: CRYPT_E_NO_REVOCATION_CHECK (0x80092012) - 失効の関数は証明 書の失効を確認できませんでした。 インストールしてたらとでてきてインストールできなかったのですがどうしたらいいでしょうか?

  • @tdnnnn2146
    @tdnnnn2146 2 месяца назад

    最新にバージョンアップしてから、音声の文字起こしでエラーが出るようになったんだけど、なんでですかねぇ?? UTF-8のエンコードエラーらしいのですが音声ファイルの名前を半角英数字にしてもエラー出るし、以前は音声ファイルが日本語名でも文字起こし出来たんですが。

    • @yuki_26
      @yuki_26 2 месяца назад

      うーん、私の環境ではそのようなエラーは確認できませんでした... 解決しない場合は再インストールやバージョン変更するなどが良いかもしれません。 お役に立てず申し訳ないです🙏

  • @minorinxx
    @minorinxx 2 месяца назад

    素晴らしいですね。 stylebert vitz2から出来た声の感情表現が例えばオーバーだなと思ったら、 句読点 、、 。。などでしか改善させる方法はないのでしょうか? アクセントに関しては 0 1があると思うのですが、、

    • @yuki_26
      @yuki_26 2 месяца назад

      抑揚パラメーターで調整するか、モデル全体的に感情オーバーであれば他モデルとのマージで感情表現を控えめにするとかかなぁと思います!

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 2 месяца назад

    リスナーのコメントが途切れた時にシロハナさんが自分で話題を考えて提供する技術とリスナーのコメントを深堀りする技術は凄いと思いました。 Style-Bert-VITS2についても単なるAI音声の感情表現を向上させる技術ではなく、もっと世の中の役に立つ技術だということが分かり、とても興味深かったです。 ライブ配信に来れて良かったです。これからの配信も楽しみにしています。

  • @user-ry6rw4eg3s
    @user-ry6rw4eg3s 2 месяца назад

    とても分かりやすい説明の動画でした。 VOICEVOX(既存ボイス)とStyle-Bert-VITS2モデルの比較も違いがはっきり分かる内容でした。 とても参考になる動画を配信していただき、ありがとうございました。

  • @tamakohonda7593
    @tamakohonda7593 4 месяца назад

    Claude3評判以上だ

  • @SuperFackfackfack
    @SuperFackfackfack 4 месяца назад

    可愛いからチャンネル登録させてもらいました。 あと初歩的な質問ですみません。シロハナちゃんを使いたいのですが合成音声をどうやって設定したらよろしいでしょうか? あと音声をクリックせず自動で流すのもどうしたらいいかわかりません。お手数ですがGPTs初心者なので教えてもらえませんでしょうか?

    • @yuki_26
      @yuki_26 4 месяца назад

      開発Pのyukiです。 チャンネル登録ありがとうございます! 以下が質問の回答です。 ・まずシロハナちゃんに関してはGPTsや合成音声情報などの一般公開はしておりません。 →RUclipsライブ配信にて、AIVTuberとして視聴者コメントからリアルタイムでシロハナちゃんと会話することが可能です! ・合成音声を自動で流すには合成音声APIなどを使用するため専門的な知識が必要となります。 ・ちなみにこの動画内での音声はイメージとして流しておりますのでその点はご了承ください。

  • @activitydestory
    @activitydestory 5 месяцев назад

    引用の要件を満たせてないク◯動画が増えそう 余談ですが「宇宙のすべての知識 プリンシピア」というウィキペの記事を垂れ流して金儲けをしていたチャンネルがかつて存在しました

  • @ramentnp
    @ramentnp 5 месяцев назад

    まさに今興味ある内容で勉強になります!

  • @mayonnaise0202
    @mayonnaise0202 6 месяцев назад

    今後の配信も期待してます!