最新記事

人工知能

「二人」のオバマが同時にスピーチ！？　音声から話者の口の動きを学習するアルゴリズムが誕生

2017年7月19日（水）18時00分
松岡由希子

Synthesizing Obama-Youtube

＜米ワシントン大学の研究チームは、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この口の形を、別の動画に合成することにも成功した＞

明らかに異なる場所や時間に存在しながら同時に同じ言葉を話す"二人"のオバマ前大統領の様子が、動画共有プラットフォーム『ユーチューブ』で公開された。

音声データをもとに生成した本物そっくりの口の形を動画に合成

もちろん、この動画は本物ではない。右側の動画は、オバマ前大統領のスピーチの音声データをもとに人工的に生成した本物そっくりの口の形を、在職中にホワイトハウスで撮影された動画に合成したものだ。そして、この本物そっくりの口の形には、人工知能における機械学習の手法が用いられている。


米ワシントン大学の研究チームは、2017年7月、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この研究チームが2015年に開発した合成技術と組み合わせることで、このアルゴリズムによって生成された口の形を、別の動画に合成することにも成功した。

一般に、音声から動画に変換するには、特定の音と口の形がどのように関連しているのかを把握することが必要だ。従来は、複数の人々に同じセンテンスを何度も繰り返して話してもらい、その様子を撮影するという手法がとられていたが、時間や手間がかかるのが課題であった。

既存のインタビュー映像などを活用できる

一方、このアルゴリズムでは、インターネットで公開されているインタビュー映像や動画コンテンツなど、既存のデータを活用できるのが利点。人工ニューラルネットワーク（人工神経回路網）に動画データを読み込ませて"学習"させ、それぞれの音声から基本的な口の形に変換する仕組みだ。対象となる動画にこれらの口の形を重ねて合成し、タイミングを調整すれば、本物そっくりのスピーチ動画が完成する。

このアルゴリズムの実用的なニーズの一例として、ビデオ会議や動画チャットなど、音声と動画によるコミュニケーション手段の改善が挙げられる。たとえば、『スカイプ』などのチャットツールから収集した動画データを使って各ユーザーの話しぶりを"学習"させれば、アルゴリズムによって、そのユーザーの音声から合成動画を生成でき、フェイス・トゥ・フェイスに近い状態でコミュニケーションできるわけだ。

次のページフェイク・ニュースへの対策にも
今、あなたにオススメ
ニュース速報

ビジネス

商船三井の今期、純利益を500億円上方修正　市場予
2025.01.31

ビジネス

午前の日経平均は続伸、米株高の流れを好感　徐々に模
2025.01.31

ワールド

トランプ氏「ＢＲＩＣＳ通貨つくるな」、対応次第で1
2025.01.31

ワールド

米首都の空中衝突、旅客機のブラックボックス回収　6
2025.01.31
ニュース速報一覧
今、あなたにオススメ
MAGAZINE
特集：トランプ革命
特集：トランプ革命
2025年2月 4日号（1/28発売）

大統領令で前政権の政策を次々覆すトランプの「常識の革命」で世界はこう変わる

メールマガジンのご登録はこちらから。
人気ランキング
  • 1
    週刊文春は「訂正」を出す必要などなかった
  • 2
    中居正広は何をしたのか？　真相を知るためにできる唯一の方法
  • 3
    「DeepSeekショック」の株価大暴落が回避された理由
  • 4
    今も続いている中国「一帯一路2.0」に、途上国が失望…
  • 5
    東京23区内でも所得格差と学力格差の相関関係は明らか
  • 6
    ピークアウトする中国経済...「借金取り」に転じた「…
  • 7
    「やっぱりかわいい」10年ぶり復帰のキャメロン・デ…
  • 8
    DeepSeekショックでNVIDIA転落...GPU市場の行方は？ …
  • 9
    空港で「もう一人の自分」が目の前を歩いている？　…
  • 10
    フジテレビ局員の「公益通報」だったのか...スポーツ…
  • 1
    中居正広は何をしたのか？　真相を知るためにできる唯一の方法
  • 2
    週刊文春は「訂正」を出す必要などなかった
  • 3
    世界初の研究：コーヒーは「飲む時間帯」で健康効果が異なる【最新研究】
  • 4
    「DeepSeekショック」の株価大暴落が回避された理由
  • 5
    緑茶が「脳の健康」を守る可能性【最新研究】
  • 6
    DeepSeekショックでNVIDIA転落...GPU市場の行方は？ …
  • 7
    血まみれで倒れ伏す北朝鮮兵...「9時間に及ぶ激闘」…
  • 8
    有害なティーバッグをどう見分けるか？...研究者のア…
  • 9
    今も続いている中国「一帯一路2.0」に、途上国が失望…
  • 10
    煩雑で高額で遅延だらけのイギリス列車に見切り...鉄…
  • 1
    ティーバッグから有害物質が放出されている...研究者が警告【最新研究】
  • 2
    有害なティーバッグをどう見分けるか？...研究者のアドバイス【最新研究･続報】
  • 3
    中居正広は何をしたのか？　真相を知るためにできる唯一の方法
  • 4
    体の筋肉量が落ちにくくなる3つの条件は？...和田秀…
  • 5
    週刊文春は「訂正」を出す必要などなかった
  • 6
    膝が痛くても足腰が弱くても、一生ぐんぐん歩けるよ…
  • 7
    「涙止まらん...」トリミングの結果、何の動物か分か…
  • 8
    「戦死証明書」を渡され...ロシアで戦死した北朝鮮兵…
  • 9
    中国でインフルエンザ様の未知のウイルス「HMPV」流…
  • 10
    失礼すぎる！「1人ディズニー」を楽しむ男性に、女性…
日本再発見 シーズン2
CHALLENGING INNOVATOR
Wonderful Story
MOOK
ニューズウィーク日本版別冊
ニューズウィーク日本版別冊

好評発売中