//
「画像解析と音声認識を利用した授業動画の自動チャプタ分割」北村優詩
Built with

「画像解析と音声認識を利用した授業動画の自動チャプタ分割」北村優詩

授業動画を自動でチャプタ分割するシステムを作成した。本研究には、授業動画を用いた復習をスムーズに行えるようにし、コロナ収束後もオンライン授業を推進する目的がある。本研究では、自動チャプタ分割に画像解析のみを利用したもの、音声認識のみを利用したもの、画像解析と音声認識を組み合わせたものの3つのシステムをPythonで作成し、それぞれ評価した。結果として、画像解析のみでは過剰な検出数と誤検出の多さ、音声解析のみでは検出漏れが高頻度で確認された。画像解析と音声認識を組み合わせた手法では、誤検出の発生頻度に改善がみられた。一方で、音声認識によるチャプタへの情報付与は適切に行えなかった。
Gallery