tavus-overview

Tavus の概要

Tavus はサンフランシスコを拠点とする AI 研究所で、人間らしさの技術を機械に教える Human Computing を先駆けて開発しています。

ミッション

「自動化によって効率は向上しましたが、デジタル上のやり取りから共感、機微、存在感が失われました。」

Tavus は、感情知能を備え、リアルタイムで見て、聞いて、理解し、応答できる AI を開発することで、人間と機械の隔たりを埋めることを目指しています。顔のあるチャットボットではなく、対面でやり取りするような、本物のデジタル上の存在感を実現します。

Human Computing とは？

Human Computing は、コンピューティングのパラダイムシフトです。人間がコンピューターに合わせるのではなく、コンピューターが人間に適応します。

基本原則：

• 人間中心の UI：ほかの人と話すような自然さで AI とやり取りできます。コマンドも、学習期間も必要ありません
• 自動化よりも存在感：何かではなく、誰かのように感じられる AI
• 感情知能：言葉だけでなく、口調、表情、文脈を読み取ります

会話型ビデオインターフェース（CVI）

CVI は Tavus の主力製品です。リアルタイムの対面型 AI 会話を実現する、API ファーストのプラットフォームです。

CVI がチャットボットやアバターと異なる点：

• リアルタイムの対話型会話（事前にレンダリングした動画ではありません）
• 発話ごとのレイテンシは約 600ms
• 表情を読み取り、口調を解釈し、リアルタイムで適応します
• 関数呼び出し、RAG、メモリーを含む包括的なオーケストレーション
• ホワイトラベル対応、埋め込み可能、エンタープライズ対応

CVI のコンポーネント：

コンポーネント	機能
Replica	ビジュアルアバター。AI の顔と外見です
Persona	振る舞い、パーソナリティ、LLM 設定、システムプロンプト
Conversation	Replica と Persona を接続するライブ WebRTC セッション

モデルスタック

Tavus は、人間らしい存在感を実現するために連携する独自モデルを開発しています。

Phoenix-4（レンダリング）

フォトリアルな顔のレンダリングを行うガウス拡散モデルです。高精細な顔の動きを合成します。

• 微細な表情やわずかな動き
• 顔全体のアニメーション（唇だけではありません）
• リアルタイムの感情表現
• アイデンティティの維持

Raven-1（知覚）

AI が「見る」ことを可能にするマルチモーダル知覚モデルです。

• 表情やボディーランゲージを読み取ります
• 感情や意図を検出します
• 周囲の環境や画面の内容を分析します
• 文脈を認識します

Sparrow-1（ターンテイキング）

自然な会話の流れを実現する、Transformer ベースの対話モデルです。

• 聞く、間を置く、話すタイミングを判断します
• 応答レイテンシは約 600ms
• 割り込みに自然に対応します
• 多言語に対応しています

製品

会話型ビデオインターフェース（CVI）

開発者がリアルタイムの AI ビデオ会話を組み込むための API ファーストプラットフォームです。

• エンドツーエンドのパイプライン：知覚 → STT → LLM → TTS → レンダリング
• カスタマイズ可能なレイヤー（独自の LLM/TTS を利用可能）
• ナレッジベース（RAG）とメモリー
• 外部連携向けの関数呼び出し

Video Generation API

スクリプトや音声から非同期で動画を生成します。

• 大規模なパーソナライズ動画の作成
• カスタム背景とウォーターマーク
• 透過背景に対応

Replica API

2 分間のトレーニング動画からデジタルツインを作成します。

• スタジオ品質の再現性
• 既成の Replica を利用可能
• アイデンティティの維持

PALs（パーソナル AI ライフフォーム）

記憶し、成長し、つながる、消費者向け AI コンパニオンです。

• テキスト、通話、またはビデオチャット
• 永続的な記憶
• 積極的な状況確認

ユースケース

• 営業と採用：AI SDR、面接官、候補者評価のワークフロー
• 教育：チューター、トレーナー、オンボーディング
• ヘルスケア：患者のコンパニオン、トレーニングシミュレーション
• カスタマーサポート：24 時間 365 日の対面型サポート
• パーソナル：コンパニオン、コーチ、生産性向上アシスタント

主な統計

• 20 億件以上のインタラクションを実現
• 発話ごとのレイテンシは約 600ms
• 30 以上の言語に対応
• SOC 2、GDPR、HIPAA に準拠（エンタープライズ）

リンク

プラットフォームとドキュメント

• ホームページ: https://www.tavus.io
• 開発者ポータル: https://platform.tavus.io
• ドキュメント: https://docs.tavus.io
• API リファレンス: https://docs.tavus.io/api-reference/overview
• CVI の概要: https://docs.tavus.io/sections/conversational-video-interface/overview-cvi

リソース

• 研究: https://www.tavus.io/research
• ブログ: https://www.tavus.io/blog
• プロジェクト例: https://github.com/Tavus-Engineering/tavus-examples
• ステータス: https://status.tavus.io

コミュニティ

• Discord: https://discord.gg/5Y9Er6WNN5
• GitHub: https://github.com/Tavus-Engineering

はじめに

• 登録: https://platform.tavus.io/auth/sign-up?is_developer=true
• 無料プラン: 会話時間25分＋ストックレプリカ

会社概要

• 設立: 2021年、Hassaan Raza と Quinn Favret により設立
• 本社: サンフランシスコ
• 出資元: Sequoia、Scale Venture Partners、Y Combinator、HubSpot
• カテゴリー: ヒューマンコンピューティング／AI 研究所

料金プラン

プラン	分数	レプリカ	同時実行数
無料	25	ストックのみ	1
Starter（$59/mo）	100	カスタム1体	3
Growth（$397/mo）	1,250	カスタム3体	15
Enterprise	カスタム	カスタム	カスタム＋SLA

倫理と信頼

Tavus は以下の原則に基づいて構築されています。

• インフォームドコンセント: 使用するすべての肖像について許可を得ています
• 透明性の高いシステム: 隠された仕組みはありません
• 全面的な開示: 仕組みを理解できます
• バイアスレビュー: 積極的なモニタリングと助言による監督を実施しています