SportSkills: スポーツ指導ビデオから学ぶ身体スキル学習

arXiv cs.CV / 2026/3/27

📰 ニュースSignals & Early TrendsIdeas & Deep AnalysisModels & Research

要点

  • 本論文は、汎用的な人の行動認識ではなく身体スキルの学習に焦点を当てた、大規模な「その場で取得された(in-the-wild)」スポーツ指導ビデオ・データセット SportSkills を紹介する。
  • SportSkills は、55種目のスポーツにまたがる 360k+ の指導ビデオと、630k+ の視覚的デモンストレーションを含み、動作の裏にあるノウハウを説明する指導ナレーションと対応付けられている。
  • 実験の結果、SportSkills で学習することで身体動作のきめ細かな理解が向上し、同一モデルを用いて従来の行動中心データセットで学習した場合と比較して最大 4 倍の表現獲得(representation gains)が報告されている。
  • 著者らはさらに、誤りを条件とした指導ビデオの検索手法も提案しており、ユーザの実行とクエリを対応する改善に役立つクリップへ対応付けることで、(すなわち実行可能な)フィードバックを可能にする。
  • プロのコーチによる評価では、この検索アプローチが、ユーザのクエリに基づく視覚的指示のパーソナライズを大幅に改善することが示された。

SportSkills: スポーツ指導ビデオから学ぶ身体スキル学習 | AI Navigate