最新記事

人工知能

「二人」のオバマが同時にスピーチ！？　音声から話者の口の動きを学習するアルゴリズムが誕生

2017年7月19日（水）18時00分
松岡由希子

Synthesizing Obama-Youtube

＜米ワシントン大学の研究チームは、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この口の形を、別の動画に合成することにも成功した＞

明らかに異なる場所や時間に存在しながら同時に同じ言葉を話す"二人"のオバマ前大統領の様子が、動画共有プラットフォーム『ユーチューブ』で公開された。

音声データをもとに生成した本物そっくりの口の形を動画に合成

もちろん、この動画は本物ではない。右側の動画は、オバマ前大統領のスピーチの音声データをもとに人工的に生成した本物そっくりの口の形を、在職中にホワイトハウスで撮影された動画に合成したものだ。そして、この本物そっくりの口の形には、人工知能における機械学習の手法が用いられている。


米ワシントン大学の研究チームは、2017年7月、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この研究チームが2015年に開発した合成技術と組み合わせることで、このアルゴリズムによって生成された口の形を、別の動画に合成することにも成功した。

一般に、音声から動画に変換するには、特定の音と口の形がどのように関連しているのかを把握することが必要だ。従来は、複数の人々に同じセンテンスを何度も繰り返して話してもらい、その様子を撮影するという手法がとられていたが、時間や手間がかかるのが課題であった。

既存のインタビュー映像などを活用できる

一方、このアルゴリズムでは、インターネットで公開されているインタビュー映像や動画コンテンツなど、既存のデータを活用できるのが利点。人工ニューラルネットワーク（人工神経回路網）に動画データを読み込ませて"学習"させ、それぞれの音声から基本的な口の形に変換する仕組みだ。対象となる動画にこれらの口の形を重ねて合成し、タイミングを調整すれば、本物そっくりのスピーチ動画が完成する。

このアルゴリズムの実用的なニーズの一例として、ビデオ会議や動画チャットなど、音声と動画によるコミュニケーション手段の改善が挙げられる。たとえば、『スカイプ』などのチャットツールから収集した動画データを使って各ユーザーの話しぶりを"学習"させれば、アルゴリズムによって、そのユーザーの音声から合成動画を生成でき、フェイス・トゥ・フェイスに近い状態でコミュニケーションできるわけだ。

次のページフェイク・ニュースへの対策にも
今、あなたにオススメ
ニュース速報

ビジネス

10月の全国消費者物価、電気補助金などで2カ月連続
2024.11.22

ビジネス

欧州新車販売、10月は前年比横ばい　ＥＶ移行加速＝
2024.11.22

ビジネス

ドイツ経済、企業倒産と債務リスクが上昇＝連銀報告書
2024.11.22

ビジネス

日産、タイ従業員1000人を削減・配置転換　生産集
2024.11.22
ニュース速報一覧
今、あなたにオススメ
MAGAZINE
特集：超解説 トランプ2.0
特集：超解説 トランプ2.0
2024年11月26日号（11/19発売）

電光石火の閣僚人事で世界に先制パンチ。第2次トランプ政権で次に起きること

メールマガジンのご登録はこちらから。
人気ランキング
  • 1
    日本人はホームレスをどう見ているのか？ ルポに対する中国人と日本人の反応が違う
  • 2
    寿命が延びる、3つのシンプルな習慣
  • 3
    「1年後の体力がまったく変わる」日常生活を自然に筋トレに変える7つのヒント
  • 4
    Netflix「打ち切り病」の闇...効率が命、ファンの熱…
  • 5
    【ヨルダン王室】生後3カ月のイマン王女、早くもサッ…
  • 6
    元幼稚園教諭の女性兵士がロシアの巡航ミサイル「Kh-…
  • 7
    NewJeans生みの親ミン･ヒジン､インスタフォローをす…
  • 8
    北朝鮮は、ロシアに派遣した兵士の「生還を望んでい…
  • 9
    北朝鮮兵が「下品なビデオ」を見ている...ロシア軍参…
  • 10
    「会見拒否」で自滅する松本人志を吉本興業が「切り…
  • 1
    朝食で老化が早まる可能性...研究者が「超加工食品」に警鐘【最新研究】
  • 2
    自分は「純粋な韓国人」と信じていた女性が、DNA検査を受けたら...衝撃的な結果に「謎が解けた」
  • 3
    「会見拒否」で自滅する松本人志を吉本興業が「切り捨てる」しかない理由
  • 4
    北朝鮮兵が「下品なビデオ」を見ている...ロシア軍参…
  • 5
    朝鮮戦争に従軍のアメリカ人が写した「75年前の韓国…
  • 6
    アインシュタイン理論にズレ？ 宇宙膨張が示す新たな…
  • 7
    日本人はホームレスをどう見ているのか？ ルポに対す…
  • 8
    クルスク州の戦場はロシア兵の「肉挽き機」に...ロシ…
  • 9
    沖縄ではマーガリンを「バター」と呼び、味噌汁はも…
  • 10
    メーガン妃が「輝きを失った瞬間」が話題に...その時…
  • 1
    朝食で老化が早まる可能性...研究者が「超加工食品」に警鐘【最新研究】
  • 2
    北朝鮮兵が「下品なビデオ」を見ている...ロシア軍参加で「ネットの自由」を得た兵士が見ていた動画とは？
  • 3
    外来種の巨大ビルマニシキヘビが、シカを捕食...大きな身体を「丸呑み」する衝撃シーンの撮影に成功
  • 4
    朝鮮戦争に従軍のアメリカ人が写した「75年前の韓国…
  • 5
    自分は「純粋な韓国人」と信じていた女性が、DNA検査…
  • 6
    北朝鮮兵が味方のロシア兵に発砲して2人死亡!?　ウク…
  • 7
    「会見拒否」で自滅する松本人志を吉本興業が「切り…
  • 8
    足跡が見つかることさえ珍しい...「超希少」だが「大…
  • 9
    モスクワで高層ビルより高い「糞水（ふんすい）」噴…
  • 10
    ロシア陣地で大胆攻撃、集中砲火にも屈せず...M2ブラ…
日本再発見 シーズン2
CHALLENGING INNOVATOR
Wonderful Story
MOOK
ニューズウィーク日本版別冊
ニューズウィーク日本版別冊

好評発売中