Telegram、 WhatsApp+380637610482
ヴァレリー・ダニュク
ヴァレリー・ダニュク開発者企業向けAIツールの開発。高品質で、お手頃価格。Telegramで連絡

顔のないAIアバター:音声エージェントが何を言っているのかを明かす

AIコンサルタントがエスプレッソについて説明し、粒子がART DANYUK風の3Dの湯気の立つコーヒーカップを形成する。

得られるもの

  • ART DANYUKのライブデモ - 記事内で実際に触れることができます
  • 顔のないアバターは、しゃべる頭部や脈動する球体と比べてどうだろうか?
  • ウェブサイトにそのようなAIコンサルタントをインストールする方法、または音声AIに接続する方法
適用: 5分で保存: ビデオアバターとビデオカードを搭載したサーバー - すべてのグラフィックは訪問者のスマートフォン上で計算されます

ほぼすべてのAI音声アシスタントの画面には、脈動する球体が表示されます。あまり一般的ではありませんが、唇を動かす人物のビデオアバターである「トーキングヘッド」が表示されているものもあります。私は3つ目のバリエーションを作成し、ART DANYUKと名付けました。AIが話している間、何千もの光る粒子が集まって、話されている対象(コーヒーカップ、ソファ、イルカなど)の3Dフィギュアになり、その後、データストリームとして再び拡散します。以下にライブデモがあります。ここをタッチできます。この記事は、ウェブサイト用のAIアシスタントを選択する場合や、独自の音声エージェントを作成して記憶に残るようにしたい場合に役立ちます。

記事の中で直接試してみてください

ウィンドウ下部の任意のオブジェクトをタップするか、英語で独自の単語(例:「望遠鏡」または「ギター」)を入力してください。▶ ツアーボタンをタップすると短い対話が始まります。訪問者はコーヒー、お菓子、ソファ、馬、ボート旅行について質問し、AIが応答すると、各オブジェクトがパーティクルで組み立てられます。タップすると波が作られ、スワイプするとシーンが回転し、長押しするとオブジェクトが散布されて再構成されます。隅にある丸いボタンでパレットを変更できます。

ウィンドウが読み込まれない場合は、デモを別途開いてください: vibevox.pro/stardust-demo 。

顔がない方が、ボールと喋る頭よりも優れているのはなぜか?

球体にはAIが話している内容しか表示されない。話している人物を示す顔画像を表示すれば、誰が話しているのかが分かるが、コストがかさむ上に、「不気味の谷」現象に陥りやすい。つまり、人間そっくりの画像が、はっきりとした絵よりも不気味に感じられる現象だ。顔のないアバターは会話の内容を明らかにし、それが印象に残る。

ウェブサイト向けにART DANYUKが作成した、人間のビデオアバターと顔のないAIアバターの比較

オプション訪問者が見るもの写真はどこでカウントされるのですか?
脈動するボール抽象アニメーションブラウザでは、ほとんど負荷がかかりません
人間のビデオアバター発話に合わせて顔と唇が動くビデオカードを搭載したサーバーでは、会話全体がビデオストリームとして配信されます。
アート・ダニュク3Dでの会話の話題訪問者のブラウザ上で、ネットワーク経由で、音声とアイテム名のみが聞こえる。

2つのスタイル:ART DANYUKと3Dスター

ART DANYUK - データ彫刻。最大131,000個の粒子が繭のように流れ、その中で物体が生まれ、数秒間留まった後、再び溶けていきます。パレット:「Auto」(すべての色がゆっくりとブレンドされます)、Ocean、Coral、Nebula、Garden。WebGL2が必要です。WebGL2は、最近のほとんどのスマートフォンに搭載されています。

3Dスター– 星雲の中の渦巻銀河。星々が弧を描いて連なり、立体的な光り輝く図形を形成し、まるで本物のように回転します。あらゆるスマートフォンで動作し、お使いのデバイスの性能が基準を満たしていない場合は、ART DANYUKが自動的にこのスタイルに切り替えます。

どちらのスタイルでも、粒子はAIの声に合わせて「呼吸」する。フレーズが大きいほど、画像はより明るく鮮やかになる。

内部ではどのように機能するのでしょうか?

  1. AIツール。このモデルは、例えば「コーヒーカップ」といった英語名を指定してshow_visual(「オブジェクトを表示」)を呼び出し、そのまま話し続けます。音声は画像を待つことなく、独立した小さなデータチャネルとして機能します。
  2. 1,359個のモデルを収録したライブラリです。食品、家具、動物、植物、乗り物、工具、化粧品、宝飾品、電子機器、スポーツ用品など、幅広いジャンルを網羅しています。すべてのソースモデルは無料のCC0ライセンスで提供されており、2~10KBの点群データに変換済みです。各モデルは初回使用時にダウンロードされ、その後ブラウザにキャッシュされます。
  3. セーフティネット。AIモデルは時折、ツールを呼び出すことを「忘れる」ことがあります。そのため、軽量モデルは応答開始から1.5秒後に、訪問者の発言と応答の冒頭部分から自動的に項目を選択します。挨拶や雑談、人物に関する部分はスキップされます。
  4. カメラ。訪問者は製品をカメラに向けて「認識」をクリックする。AIが製品に名前を付け、粒子が製品の形状を組み立てる。

顔のないAIアバターが会話の主題をどのように表示するか:質問、音声応答、ライブラリモデル、パーティクル

訪問者は通話中に何を見ることができますか?

  1. 通話が接続されている間、粒子が「VibeVox」という文字を形成し、あなたのプロジェクトでは、あなたのブランド名になります。
  2. AIが挨拶をすると、粒子の雲がその声に合わせて呼吸する。一瞬の間があり、映像が消え、フレーズが生き生きと動き出す。
  3. 会話が主題に到達すると、粒子が彼の姿に集まり、AIが話している間それを保持し、その後流れ去っていく。
  4. 図形はスワイプで回転させることができ、長押しで壊すことができるので、答えを待つ時間がゲームになる。
  5. 音量は上部の着信音バーにあるスライダーで調整でき、カメラはいつでもオン/オフできます。

AIコンサルタントは訪問者の言語で応答します。検索エンジンに認識されるようにウェブサイト自体を多言語化する方法については、翻訳ツールを使わずに多言語ウェブサイトを作成する方法に関する記事で説明しました。

これはビジネスにおいてどのような点で役立つのでしょうか?

  • コーヒーショップやペストリーショップでは、コンサルタントがエスプレッソやデザートについて説明し、客はカップとカップケーキを目にする。
  • 家具店- 「狭いアパート向けのコンパクトソファ」が、画面上では瞬時にソファに変わる。
  • 観光と遠足― イルカと一緒に行くボートツアーはイルカになり、予約はバスケットになる。
  • 図書館内には、化粧品、工具、電子機器(口紅、ドライバー、ヘッドホンなど)を販売する店があります。
  • 展示会やショーケース― 来場者が質問する内容を表示するスクリーンがあり、人々がその周りに集まります。

私は、eコマースエージェントの分析において、顧客を注文へと導くAIエージェントが通常のチャットボットとどのように異なるかを明らかにしました。

ウェブサイトに掲載するにはどうすればいいですか?

既成のコンサルタントが必要な場合、ウェブサイト全体が必要な場合、またはグラフィックのみが必要な場合など、ニーズに応じて3つのオプションがあります。

必要なもの入手方法
音声と3Dビューを備えた既製のAIコンサルタントVibeVoxウィジェット - 設定で「3Dフィギュア」またはART DANYUKとアシスタントの音声を選択します。
AIアシスタントを内蔵したウェブサイト1001site AI :オールインクルーシブプラン - 月額45ユーロ、今月のプロモーションコードを使用すると最初の1ヶ月は25ユーロ
音声AI用のグラフィックStardustエンジン(GitHub) :個人プロジェクトは無料、企業向けは商用ライセンス

1001siteアカウントでAIアシスタントを有効化および設定する方法については、ナレッジベースに記載されています。

開発者にとって、接続にはモデル設定で1つのツールを使用し、ブラウザで1行のコードを追加Geminiだけで済みます。Gemini Live、OpenAI Realtime、ElevenLabs、LiveKit、Pipecatの例はStardustリポジトリにあります。

このようなAIコンサルタントが欲しいけれど、自分で設定するのは面倒だという場合は、 Telegramで@GuruAppSheetまでメッセージを送ってください。あなたのカタログ用のエージェントを作成し、あなたの製品を使ったデモをお見せします。

参考文献および出典

質疑応答

この動画やグラフィックはリアルタイムとみなされますか?

リアルタイムで動作します。パーティクルは、訪問者のブラウザがWebGL(最新のスマートフォンに搭載されている3Dグラフィックス技術)を使用して描画します。サーバーは音声とオブジェクトの名前のみを送信するため、インターネットへの負荷は最小限に抑えられます。

AIはどの形状を表示すべきかをどのように判断するのでしょうか?

会話中、AIモデルは「コーヒーカップ」などの英語のオブジェクト名を指定してshow_visualツールを呼び出します。すると、1,359個の既製3Dモデルのライブラリから適切なモデルが選択されます。適切なモデルがない場合は、絵文字アイコンの3Dシルエットが作成されます。システムは人物を描画しません。

古いスマホだと動作が遅くなるかな?

画質は自動的に調整されます。フレームレートが低下し始めた場合は、まず解像度を下げ、次に粒子数を減らします。AIが非アクティブな状態では、バッテリー寿命を節約するために画像の更新頻度が低くなり、非表示のタブでは画像が全く描画されません。

これはiPhoneでも動作しますか?

はい、iPhoneとAndroidのSafariとChromeで動作します。お使いの端末が必要なWebGL2モードをサポートしていない場合、ART DANYUKは自動的に「3D Stars」スタイルに切り替わります。これは標準のWebGLで十分な機能です。

この画像を私のプロジェクトで使用してもいいですか?

はい。Stardustエンジンは、個人および非商用プロジェクトでは無料でご利用いただけます。企業でのご利用には商用ライセンスが必要ですが、VibeVoxおよび1001siteお客様には既に含まれています。ソースコードとインストール例はGitHub(github.com/DanikVR/vibevox-stardust)で公開されています。

あなたのビジネスにも、このようなウェブサイトが欲しいですか?

1,000種類のサンプルからスタイルを選択してください。AIエージェントがあなたのリンクまたは説明に基づいてウェブサイトを構築し、数週間ではなく数分でコンテンツを追加します。

スタイルを表示