モイ、「ツイキャス」の「クリップ機能」リニューアル…OpenAIを活用した自動文字起こしつきショート動画が作成可能に

モイは、ライブ配信プラットフォーム「ツイキャス」で、30秒までのショート動画を保存・シェアできる「クリップ機能」のリニューアルを行ったことを発表した。
今回、新たに自動文字起こし機能が登場。OpenAIの音声認識モデルWhisperの学習モデルを使用し、自動で日本語と英語の字幕をつけたショート動画を作成できるようになった。
■ショート動画URLhttps://twitcasting.tv/clipview.php?movie_id=772405248&clip_id=2603473
本機能により、発話タイミングに同期したテキストの表示が可能となる。従来クリップ機能は一部配信限定で利用可能だったが、本リリースより、ほぼすべての配信で利用可能になった。
音声認識モデルWhisperについてOpenAIの音声認識モデルWhisperは約68万時間分の多様な音声の大規模データセットによる学習がされており、音声認識に加えて、音声翻訳、言語識別、多言語音声認識にも対応したマルチタスクモデル。
■クリップ機能についてhttps://twitcasting.tv/helpcenter.php?pid=HELP_CLIP_VIDEO
Source: Social Game Info
モイ、「ツイキャス」の「クリップ機能」リニューアル…OpenAIを活用した自動文字起こしつきショート動画が作成可能に