昨年12月にTechableで取り上げたアメリカのスタートアップCaptions。この時は、映像に映る人物の話し言葉を28の言語に変換するスマホアプリ「Lipdub」を紹介した。動画編集・字幕追加・吹き替えなどが可能な同社プラットフォームに、先月新たな機能が追加されたようだ。
6月に実装の新機能は「AI Creator」
Captionsのプラットフォームには、上述の自動吹き替え機能のほか、自動文字起こし機能や、テロップ作成機能なども備わっている。また、カメラの前の人物がカンペを読むために視線を落とすなどしてカメラを見ていない部分も、ポストプロダクションでカメラ目線に自動修正してくれる。
![](https://techable.jp/wp-content/uploads/2024/07/3d3096f123905602a1b793c6e71ca96e.png)
Image Credits:Captions
そこで今年6月に実装されたのが、新機能「AI Creator」だ。公式サイトで「撮影作業は飛ばして、生成しよう」と謳われるとおり、人間を撮影する必要がなくなる。誰でも簡単にAIアバターを利用して動画を制作できるのだ。
まずはいくつか用意されたAIアバターから好きなモデルを選択する。次にアバターに読ませる台詞を入力、その後映像を出力すれば、アバターがセリフ通りに話してくれる。
![](https://techable.jp/wp-content/uploads/2024/07/03088de586d0681f5538f10e38c635a8.png)
Image Credits:Captions
筆者が使用して新機能の品質をチェック
今回筆者は、無料体験版で「AI Creator」を実際に使用、AIアバターに次のような日本語の文章を読ませてみた。「ジャイアント馬場は、かつて巨人軍の投手でした。しかし野球選手としては芽が出ず、プロレスラーに転向します。アメリカに渡航した馬場は、当時の日本のトップアスリートを上回る年収を獲得しました。彼にとって、アメリカは約束の地だったのです」
![](https://techable.jp/wp-content/uploads/2024/07/de7ecd4543149f5bc1423a0e27653b3c.png)
Image Credits:Captions
ただ、「アメリカ」を「America」ではなく日本語として発音した点は評価できる。「彼にとって、アメリカは約束の地だったのです」も、ほぼ日本語ネイティブのイントネーションだった。全体としては、「誰でも簡単に生成できるAIアバター動画」の可能性を十分に感じるものだと言える。
![](https://techable.jp/wp-content/uploads/2024/07/5f3ee19c064209277ca9797d808b1490.png)
Image Credits:Captions
7月にはシリーズCラウンドで6000万ドルを調達
ニューヨークを拠点とするCaptionsは2021年に設立されたスタートアップ。![](https://techable.jp/wp-content/uploads/2024/07/founders-1.jpg)
Image Credits:Captions
このラウンドにより同社の調達総額は1億ドルに達し、企業評価額は5億ドルになったという。
今年に入ってから従業員数は15 人から60人に増加、同社ツールを利用するクリエイター数は1000万人を突破した。今後はニューヨークがAI研究のハブとなることを見込み、1億ドルを投資して同市で生成動画のリサーチを進めるとしている。
参考:
Captions
(文・澤田 真一)