Agents

LiveKit Agentsは、ブラウザではなくサーバー側で動くリアルタイムの参加者を作るPythonフレームワークです。音声アシスタントやサポート窓口、面接・チューター用ボットを作るチームが主な使い手になります。生まれるエージェントはマルチモーダルで、聞き、話し、見ながら会話を続け、音声と映像はWebRTCで流れます。

特定ベンダーに縛られないため、STT・LLM・TTS・リアルタイム音声APIは用途に合わせて差し替えられます。ジョブスケジューリングとディスパッチAPIが組み込まれており、空いているエージェントにユーザーをつなぐ処理を自前で書く必要はありません。LiveKitの電話(SIP)スタックの上にあるので同じエージェントが発着信もこなし、クライアントアプリとの状態のやり取りはRPCとデータAPIが担います。