初音ミクが美空ひばりっぽく歌う「歌唱表現転写」技術ができて調教がはかどりそうOngaCREST 2014

美空ひばりのようなこぶしやビブラートをミクに“転写”できる技術があるんです。

» 2014年08月24日 11時49分 公開
[松尾公也,ねとらぼ]

 「美空ひばりのようなこぶしで初音ミクに歌ってほしい。でも本格的なパラメータチューニングは難しそう」「スピッツのグリスダウンが好きでたまらない。この曲もスピッツのような歌い方で聞いてみたい」といったことをかなえる技術「歌唱表現転写システム」が京都大学で開発されました。

 8月23日に行われた、音と映像に関するシンポジウム「OngaCREST 2014」で京大の池宮由楽さん、糸山克寿さん、吉井和佳さんが発表した「音楽音響信号中の歌声F0軌跡に対する歌唱表現の転写システム」。

 歌い方には、ビブラート、こぶし、グリッサンドなどいろいろなテクニックがあります。例えばぼかりす(VocaListener)という技術を使えば、元の歌手の音の揺らし方などの特徴をVOCALOIDに転写することができるわけですが、そのためにはモデルとなる歌唱として、その曲を全部歌う必要があります。

 この研究では、楽曲の中から歌声のF0(音の高さの推移)をとらえ、そこからビブラートの速さ、深さ、などの歌唱表現をパラメータで操作可能なレベルに落とし込み、歌唱表現データベースとしています。

 この歌唱表現を、ターゲットとなっている歌唱(人の歌声でもVOCALOIDなどの合成歌唱でも)に転写したうえで音色も補正すると、声質は初音ミクだけど歌い方は美空ひばりだよね、といった歌声が生成されます。

 デモでは、美空ひばりの「人生一路」などから抽出した歌唱表現を、初音ミクが歌う「Yesterday」に適用し、美空ひばりの深いビブラートやこぶしをミクの声で再現していました。

 声質だけでなく歌い方の特徴までモデリングする技術としては、名古屋工業大学のSinsyや、それを元にしたCeVIOが存在しますが、この技術はまた別のアプローチで、任意の部分にボーカルテクニックを転写することが可能であるというところが違います。

 また、複数の歌手の歌唱表現データベースを組み合わせて、グリスダウンは草野マサムネ、こぶしは美空ひばり、ビブラートは平井堅といったこともできるみたいです。

 そして、この歌唱表現データベースはプロのものに限らないでしょう。元歌唱が最低1曲あればいいので、例えば亡くなった人の歌い方のままに新しい曲を歌ってもらいたいというニーズに応えられるかもしれません。

 この研究が進み、一般の人たちが使えるようになる日が来ることを心から願います。

Copyright © ITmedia, Inc. All Rights Reserved.

昨日の総合アクセスTOP10
  1. /nl/articles/2403/17/news022.jpg 【追記あり】夫に「油買ってきて」と頼んだのに、手ぶらで帰宅した理由はまさかの…… とんでもないオチに「やめてww」「久しぶりに大爆笑」
  2. /nl/articles/2403/18/news022.jpg 1歳息子の“はじめての寝落ち”が140万再生 10歳兄のやさしい行動に「なにこの平和でかわいい世界」「最高に癒やされる」と絶賛の声
  3. /nl/articles/2403/17/news063.jpg 「予言者いた」「先見の明」 大谷翔平選手&真美子さんの結婚を2021年時点で予言(?)している投稿が発掘され話題に
  4. /nl/articles/2403/17/news047.jpg 北海道内の移動距離を本州と比較したら…… 感覚がバグるマップ画像に「これが北海道」「大きすぎる」
  5. /nl/articles/2403/18/news042.jpg 生後1カ月の赤ちゃん「ぼく泣かないもんねっ」 うるうるおめめとへの字口が「はぁ〜たまらん!」「ぐぁぁああああっっ」取り乱すほどかわいい
  6. /nl/articles/2403/15/news126.jpg 「一番イチャイチャしているように見える」 大谷選手が公開した写真でドジャース山本由伸選手の“手つなぎ”?が話題に 「そっちに目が行く」
  7. /nl/articles/2312/29/news019.jpg 「妻の服を勝手に着て脱げなくなったムキムキ夫とデカワンコ」に爆笑の嵐 シュールすぎる状況が500万表示突破
  8. /nl/articles/2403/18/news025.jpg “おしりが5日で変わる”トレーニング! 「明日からやるか」「1日1回だけなら続けられる」と累計3000万再生突破
  9. /nl/articles/2403/18/news056.jpg 大好きなボールを100個プレゼントされたときのワンコの表情に「放心ww」「引いてない?」 直視できない姿がSNSで話題
  10. /nl/articles/2403/18/news064.jpg 赤ちゃんが妙に静かだと思ったら…… 思わぬものへの“真剣モード”に笑顔になる人続出「たれたもちもちほっぺたまらん!」
先週の総合アクセスTOP10
  1. 水道検針員から直筆の手紙、驚き確認すると…… メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
  2. 昭和時代に“無かった物”が写っている……? 細かすぎて伝わらない「未来から来たことがバレた写真」に6万いいね
  3. 「マジで汚い」「こんなもんです」 辻希美、“大散乱”のリビングと“新”キッチンの差を公開し共感の声集まる
  4. 双子の赤ちゃん、姉が全力でくしゃみして…… 被害にあった妹の反応に「生後3ヶ月でドリフのコントw」「めちゃどっちもカワイイ」と絶賛の声
  5. 「よくも病院に連れてきたな……」とにらむ猫、先生が来た瞬間 驚きの変貌に爆笑の声「これがほんとの猫かぶり」
  6. 急に片耳がたれたワンコ、慌てて病院にいった結果…… 「こんな可愛い診断結果初めて見たよw」「笑っちゃった」と反響
  7. 「何羽いる?」一見普通の“草むら”、よく見ると……? 思わず絶叫まちがいなしの1枚に「どっさりいるw」「まさに迷彩!」
  8. 店員に「この子は懐きませんよ」と言われたチンチラ、家に来て3日後…… 人を信じる姿に「愛が伝わったんですね」
  9. 元SDN48光上せあら、目を離した隙に……子どもが商品を触り“全買取” 「子連れママに厳しすぎないか?」
  10. 柴犬を子どものように育てた結果、人間みたいな行動をするようになった 何気ない幸せな日常に「完全に家族の一員」「全部が愛くるしい」
先月の総合アクセスTOP10
  1. 釣れたキジハタを1年飼ってみると…… 飼い主も驚きの姿に「もはや、魚じゃない」「もう家族やね」と反響
  2. パーカーをガバッとまくり上げて…… 女性インフルエンサー、台湾でボディーライン晒す 上半身露出で物議 「羞恥心どこに置いてきたん?」
  3. “TikTokはエロの宝庫だ” 女性インフルエンサー、水着姿晒した雑誌表紙に苦言 「なんですか? これ?」
  4. 1歳妹を溺愛する18歳兄、しかし妹のひと言に表情が一変「ちがうなぁ!?」 ママも笑っちゃうオチに「かわいいし天才笑」「何度も見ちゃう」
  5. 8歳兄が0歳赤ちゃんを寝かしつけ→2年後の現在は…… 尊く涙が出そうな光景に「可愛すぎる兄妹」「本当に優しい」
  6. 1人遊びに夢中な0歳赤ちゃん、ママの視線に気付いた瞬間…… 100点満点のリアクションにキュン「かわいすぎて鼻血出そう!」
  7. 67歳マダムの「ユニクロ・緑のヒートテック重ね着術」に「色の合わせ方が神すぎる」と称賛 センス抜群の着こなしが参考になる
  8. “双子モデル”りんか&あんな、成長した姿に驚きの声 近影に「こんなにおっきくなって」「ちょっと見ないうちに」
  9. 犬が同じ場所で2年間、トイレをし続けた結果…… 笑っちゃうほど様変わりした光景が379万表示「そこだけボッ!ってw」
  10. 新幹線で「高級ウイスキー」を注文→“予想外のサイズ”に仰天 「むしろすげえ」「家に飾りたい」