Click-to-Ask: オフラインのコピーライティングとオンラインの対話型QAを備えたAIライブ配信アシスタント

要旨: ライブストリーミング・コマースは現代の放送の顕著な形態となっています。配信者のより効率的で便利な商品プロモーションを支援するために、オフラインとオンラインの補完的な要素を備えたAI駆動型アシスタント「Click-to-Ask」を提案します。オフラインモジュールは多様なマルチモーダル製品情報を処理し、複雑な入力を構造化された製品データへ変換し、適合したプロモーション用コピーライティングを生成します。ライブ配信中、オンラインモジュールは視聴者の質問にリアルタイムで回答できるよう、配信者が質問をクリックすることを可能にし、オフラインモジュールによって生成された構造化された製品情報と、ストリーミングアーキテクチャで維持されるイベントレベルの履歴情報の両方を活用します。このシステムは、プロモーション準備に要する時間を大幅に短縮し、コンテンツのエンゲージメントを高め、視聴者の問い合わせへの迅速な対応を可能にし、最終的にライブストリーミングコマースの効果を高めます。TikTokのライブストリームフレームの収集データセットに基づき、提案手法は質問認識精度0.913と応答品質スコア0.876を達成しており、実用的な適用可能性を示す有望性を示しています。動画デモンストレーションは以下で視聴できます: https://www.youtube.com/shorts/mWIXK-SWhiE。