最新記事

人工知能

「二人」のオバマが同時にスピーチ！？　音声から話者の口の動きを学習するアルゴリズムが誕生

2017年7月19日（水）18時00分
松岡由希子

Synthesizing Obama-Youtube

＜米ワシントン大学の研究チームは、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この口の形を、別の動画に合成することにも成功した＞

明らかに異なる場所や時間に存在しながら同時に同じ言葉を話す"二人"のオバマ前大統領の様子が、動画共有プラットフォーム『ユーチューブ』で公開された。

音声データをもとに生成した本物そっくりの口の形を動画に合成

もちろん、この動画は本物ではない。右側の動画は、オバマ前大統領のスピーチの音声データをもとに人工的に生成した本物そっくりの口の形を、在職中にホワイトハウスで撮影された動画に合成したものだ。そして、この本物そっくりの口の形には、人工知能における機械学習の手法が用いられている。


米ワシントン大学の研究チームは、2017年7月、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この研究チームが2015年に開発した合成技術と組み合わせることで、このアルゴリズムによって生成された口の形を、別の動画に合成することにも成功した。

一般に、音声から動画に変換するには、特定の音と口の形がどのように関連しているのかを把握することが必要だ。従来は、複数の人々に同じセンテンスを何度も繰り返して話してもらい、その様子を撮影するという手法がとられていたが、時間や手間がかかるのが課題であった。

既存のインタビュー映像などを活用できる

一方、このアルゴリズムでは、インターネットで公開されているインタビュー映像や動画コンテンツなど、既存のデータを活用できるのが利点。人工ニューラルネットワーク（人工神経回路網）に動画データを読み込ませて"学習"させ、それぞれの音声から基本的な口の形に変換する仕組みだ。対象となる動画にこれらの口の形を重ねて合成し、タイミングを調整すれば、本物そっくりのスピーチ動画が完成する。

このアルゴリズムの実用的なニーズの一例として、ビデオ会議や動画チャットなど、音声と動画によるコミュニケーション手段の改善が挙げられる。たとえば、『スカイプ』などのチャットツールから収集した動画データを使って各ユーザーの話しぶりを"学習"させれば、アルゴリズムによって、そのユーザーの音声から合成動画を生成でき、フェイス・トゥ・フェイスに近い状態でコミュニケーションできるわけだ。

次のページフェイク・ニュースへの対策にも
今、あなたにオススメ
ニュース速報

ワールド

比大統領「犯罪計画見過ごせず」、当局が脅迫で副大統
2024.11.25

ビジネス

トランプ氏、ガス輸出・石油掘削促進　就任直後に発表
2024.11.25

ビジネス

トタルエナジーズがアダニとの事業停止、「米捜査知ら
2024.11.25

ワールド

ロシア、ウクライナ停戦で次期米政権に期待か　ウォル
2024.11.25
ニュース速報一覧
今、あなたにオススメ
MAGAZINE
特集：超解説 トランプ2.0
特集：超解説 トランプ2.0
2024年11月26日号（11/19発売）

電光石火の閣僚人事で世界に先制パンチ。第2次トランプ政権で次に起きること

メールマガジンのご登録はこちらから。
人気ランキング
  • 1
    「1年後の体力がまったく変わる」日常生活を自然に筋トレに変える7つのヒント
  • 2
    「ダイエット成功」3つの戦略...「食事内容」ではなく「タイミング」である可能性【最新研究】
  • 3
    「このまま全員死ぬんだ...」巨大な部品が外されたまま飛行機が離陸体勢に...窓から女性が撮影した映像にネット震撼
  • 4
    寿命が延びる、3つのシンプルな習慣
  • 5
    寿命が5年延びる「運動量」に研究者が言及...40歳か…
  • 6
    日本人はホームレスをどう見ているのか？ ルポに対す…
  • 7
    北朝鮮は、ロシアに派遣した兵士の「生還を望んでい…
  • 8
    元幼稚園教諭の女性兵士がロシアの巡航ミサイル「Kh-…
  • 9
    クルスク州のロシア軍司令部をウクライナがミサイル…
  • 10
    「典型的なママ脳だね」 ズボンを穿き忘れたまま外出…
  • 1
    寿命が延びる、3つのシンプルな習慣
  • 2
    「1年後の体力がまったく変わる」日常生活を自然に筋トレに変える7つのヒント
  • 3
    朝食で老化が早まる可能性...研究者が「超加工食品」に警鐘【最新研究】
  • 4
    「会見拒否」で自滅する松本人志を吉本興業が「切り…
  • 5
    自分は「純粋な韓国人」と信じていた女性が、DNA検査…
  • 6
    日本人はホームレスをどう見ているのか？ ルポに対す…
  • 7
    北朝鮮は、ロシアに派遣した兵士の「生還を望んでい…
  • 8
    Netflix「打ち切り病」の闇...効率が命、ファンの熱…
  • 9
    「このまま全員死ぬんだ...」巨大な部品が外されたま…
  • 10
    「ダイエット成功」3つの戦略...「食事内容」ではな…
  • 1
    朝食で老化が早まる可能性...研究者が「超加工食品」に警鐘【最新研究】
  • 2
    北朝鮮兵が「下品なビデオ」を見ている...ロシア軍参加で「ネットの自由」を得た兵士が見ていた動画とは？
  • 3
    寿命が延びる、3つのシンプルな習慣
  • 4
    「1年後の体力がまったく変わる」日常生活を自然に筋…
  • 5
    外来種の巨大ビルマニシキヘビが、シカを捕食...大き…
  • 6
    朝鮮戦争に従軍のアメリカ人が写した「75年前の韓国…
  • 7
    自分は「純粋な韓国人」と信じていた女性が、DNA検査…
  • 8
    北朝鮮兵が味方のロシア兵に発砲して2人死亡!?　ウク…
  • 9
    「会見拒否」で自滅する松本人志を吉本興業が「切り…
  • 10
    足跡が見つかることさえ珍しい...「超希少」だが「大…
日本再発見 シーズン2
CHALLENGING INNOVATOR
Wonderful Story
MOOK
ニューズウィーク日本版別冊
ニューズウィーク日本版別冊

好評発売中