OUR PRODUCT過去の自社開発2023〜2024年
長い動画や記事から、AIが動画を自動でつくるツールを自社で開発
- 業種
- 動画の自動生成ツール
- 期間
- 2023年11月〜2024年9月
- 体制
- Rekidの自社開発
過去の自社開発
元の動画（横長）
- 0:00
- 12:04
- 31:40
- 58:12
- 1:12:00
AIが選んだ見どころ
- 1小さく始めること12:04〜12:5854秒
- 2失敗から学んだこと31:40〜32:3555秒
- 3これから挑戦したいこと58:12〜59:0149秒
9:41●●●
字幕つきプレビュー
「小さく始めることです」
- 2失敗から学んだこと
- 3これから挑戦したいこと
長い動画から、見どころを3本
01 ISSUE
課題
動画の制作には、素材選び、台本、編集、字幕づけと手間がかかります。長い動画から見どころを切り出したり、記事の内容を動画にしたりする作業を、もっと手軽にできないかと考えました。
02 APPROACH
取り組み
長い動画を文字に起こし、AIが見どころを選んで、字幕つきの縦長の切り抜き動画を自動でつくるツールを開発しました。あわせて、Webの記事から台本・音声・動画をつくり、YouTubeへ自動で投稿する仕組みもつくり、自社で運用しました。ツールを使った動画制作のサービスとして、社外にも提供していました。
2つのツールの仕組み
- 1長い動画対談・講演など
- 2文字起こし話した内容を文字に
- 3見どころの抽出AIが選ぶ
- 4縦長の切り抜き動画字幕つきで自動作成
- 1Web記事・RSS新しい記事を取得
- 2台本AIが動画用に書く
- 3音声読み上げをつくる
- 4動画映像と字幕を合成
- 5YouTubeへ自動投稿
主な機能
- 文字起こしと、AIによる見どころの抽出
- 字幕つきの縦長の切り抜き動画の自動作成
- Web記事やRSSからの台本・音声・動画の自動作成
- YouTubeへの自動投稿
プレビュー
| 開始 | 終了 | 字幕 |
|---|---|---|
| 0:00.0 | 0:03.2 | 何かを続けたいなら |
| 0:03.2 | 0:06.8 | 最初は小さく始めることです |
| 0:06.8 | 0:10.5 | 1日5分でもいいんです |
| 0:10.5 | 0:14.1 | 大事なのは、やめないこと |
| 0:14.1 | 0:17.9 | 慣れたら少しずつ増やせばいい |
| 0:17.9 | 0:21.4 | それが一番の近道でした |
タイミングを自動で合わせる字幕を追加
切り抜き動画の編集。字幕の位置とタイミングを調整
03 RESULT
成果
1,400+コミット2つのツールを合わせた開発の規模
2023年11月から2024年9月まで開発と運用を続けました。2つのツールを合わせて、1,400回を超えるコミットを重ねています。
04 TECHNOLOGY
使った技術
- Next.js
- Remotion（AWS Lambda）
- Python
- OpenAI API
- 音声合成（VOICEVOXなど）
- YouTube Data API
- Terraform
- Stripe
