初音ミクが美空ひばりっぽく歌う「歌唱表現転写」技術ができて調教がはかどりそう:OngaCREST 2014
美空ひばりのようなこぶしやビブラートをミクに“転写”できる技術があるんです。
「美空ひばりのようなこぶしで初音ミクに歌ってほしい。でも本格的なパラメータチューニングは難しそう」「スピッツのグリスダウンが好きでたまらない。この曲もスピッツのような歌い方で聞いてみたい」といったことをかなえる技術「歌唱表現転写システム」が京都大学で開発されました。
8月23日に行われた、音と映像に関するシンポジウム「OngaCREST 2014」で京大の池宮由楽さん、糸山克寿さん、吉井和佳さんが発表した「音楽音響信号中の歌声F0軌跡に対する歌唱表現の転写システム」。
歌い方には、ビブラート、こぶし、グリッサンドなどいろいろなテクニックがあります。例えばぼかりす(VocaListener)という技術を使えば、元の歌手の音の揺らし方などの特徴をVOCALOIDに転写することができるわけですが、そのためにはモデルとなる歌唱として、その曲を全部歌う必要があります。
この研究では、楽曲の中から歌声のF0(音の高さの推移)をとらえ、そこからビブラートの速さ、深さ、などの歌唱表現をパラメータで操作可能なレベルに落とし込み、歌唱表現データベースとしています。
この歌唱表現を、ターゲットとなっている歌唱(人の歌声でもVOCALOIDなどの合成歌唱でも)に転写したうえで音色も補正すると、声質は初音ミクだけど歌い方は美空ひばりだよね、といった歌声が生成されます。
デモでは、美空ひばりの「人生一路」などから抽出した歌唱表現を、初音ミクが歌う「Yesterday」に適用し、美空ひばりの深いビブラートやこぶしをミクの声で再現していました。
声質だけでなく歌い方の特徴までモデリングする技術としては、名古屋工業大学のSinsyや、それを元にしたCeVIOが存在しますが、この技術はまた別のアプローチで、任意の部分にボーカルテクニックを転写することが可能であるというところが違います。
また、複数の歌手の歌唱表現データベースを組み合わせて、グリスダウンは草野マサムネ、こぶしは美空ひばり、ビブラートは平井堅といったこともできるみたいです。
そして、この歌唱表現データベースはプロのものに限らないでしょう。元歌唱が最低1曲あればいいので、例えば亡くなった人の歌い方のままに新しい曲を歌ってもらいたいというニーズに応えられるかもしれません。
この研究が進み、一般の人たちが使えるようになる日が来ることを心から願います。
関連記事
- 俺、歌声になってみたから、歌わせてみない? 楽譜を入力すれば歌ってくれる「Sinsy」の中の人体験
自分の知らないところで、自分の声が、知らない曲を歌っている――そんな展開を期待してます。 - 音声合成・歌声合成の新星「CeVIO」、その謎が解けた!
無償の音声合成・歌声合成ソフト「CeVIO Creative Studio FREE」が公開された。簡単な操作でキャラのおしゃべりを制作できる期待の新星、その開発の経緯やこれからを教えてもらった。 - ボカロネット? どうせなら作詞もやってくんないかな、というボカロP向け自動作詞ツールを探してみた
怠惰なあなたのために。 - ニコニコ動画の7年間をひとまたぎするSongrium「超歴史プレーヤ」が便利すぎる
カテゴリごとの栄枯盛衰もまる分かり! - 「ポケット・ミク」に好きな歌詞を歌ってもらえる祭りが始まったよ
鍵盤をペンでなぞれば初音ミクの歌声で歌ってくれる「ポケット・ミク」がさらに進化。 - 産総研が音楽体験をさらに刺激的にした「おどるSongrium」、お子ちゃま向けの「サビ抜きSongle」を期間限定で提供
4月1日だけなんてもったいない!
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
-
元横綱・貴乃花、再婚後の激変ぶりに驚きの声 ヒゲ生やした近影に「ショーケンみたい」「ワイルドー」
-
中山美穂、金髪&ミニ丈の大胆イメチェンに視聴者びっくり! “格付け”出演の最新ビジュアルに「誰だか分からなかった」
-
「『ちゅ〜る』の紅麹色素は大丈夫?」 小林製薬の「紅麹」報道で飼い主に不安広がる
-
ミス筑波大モデル、25キロ減量したビフォーアフターに「ホント凄い」 整形疑う声も「元々は埋もれてたようですね」
-
【まとめ】小林製薬「紅麹」問題 味噌や酒など紅麹原料使用メーカーの自主回収相次ぐ 20社以上が発表
-
日本エレキテル連合・中野、ネタで酷使し容姿に異変→手術を決断 「ダメよ〜、ダメダメ」でブレイク、2022年にがん公表
-
「紫のトトロ買った」 “ジブリを1ミリも知らない”友だちから連絡→まさかの正体に爆笑 友だちはその後ジブリを見た?
-
ドイツ人家族が日本のバウムクーヘンを実食、一番おいしいと絶賛したのは…… 満場一致の結果に「参考になります」「他の食べ比べもお願い」
-
「紫のトトロ買った」 “ジブリを1ミリも知らない”友人から連絡→まさかの正体に爆笑「それトトロやない」
-
「ご安心ください」 “紅麹ショック”でDHCとファンケルが声明…… サプリ販売は継続中 小林製薬では死亡患者がサプリ摂取
- 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果…… 驚愕の正体が230万表示「こんなん噴くわ!」
- フワちゃん、収録中に見えてはいけない“部位”が映る まさかの露出に「拡大しちゃったじゃん」「またか」の声
- 「これは悲劇」 ヤマザキ“春のパンまつり”シールを集めていたはずなのに…… 途中で気づいたまさかの現実
- 「ふざけんな」 宿泊施設に「キャンセル料金を払わなくする方法」が物議 宿泊施設「大目に見てきたが厳格化する」
- 田代まさしの息子・タツヤ、母の逝去を報告 「あんなに悲しむ父親の姿を見たのは初めて」
- 「遺体の写真晒すのはさすがに」「不愉快」 坂間叶夢さんの葬儀に際して“不適切”写真を投稿で物議
- 大友康平、伊集院静さんの“お別れ会”で「“平服でお越しください”とあったので……」 服装が浮きまくる事態に
- 妊娠中に捨てられていた大型犬を保護 救われた尊い命に安堵と憤りの声「絶対に許せません」「親子ともに助かって良かった」
- 極寒トイレが100均アイテムで“裸足で歩ける暖かさ”に 今すぐマネできるDIYに「これは盲点」「簡単に掃除が出来る」
- 「奥さん目をしっかり見て挨拶してる」「品を感じる」 大谷翔平&真美子さんのオフ写真集、球団関係者が公開
- 釣れたキジハタを1年飼ってみると…… 飼い主も驚きの姿に「もはや、魚じゃない」「もう家族やね」と反響
- パーカーをガバッとまくり上げて…… 女性インフルエンサー、台湾でボディーライン晒す 上半身露出で物議 「羞恥心どこに置いてきたん?」
- “TikTokはエロの宝庫だ” 女性インフルエンサー、水着姿晒した雑誌表紙に苦言 「なんですか? これ?」
- 1歳妹を溺愛する18歳兄、しかし妹のひと言に表情が一変「ちがうなぁ!?」 ママも笑っちゃうオチに「かわいいし天才笑」「何度も見ちゃう」
- 8歳兄が0歳赤ちゃんを寝かしつけ→2年後の現在は…… 尊く涙が出そうな光景に「可愛すぎる兄妹」「本当に優しい」
- 1人遊びに夢中な0歳赤ちゃん、ママの視線に気付いた瞬間…… 100点満点のリアクションにキュン「かわいすぎて鼻血出そう!」
- 67歳マダムの「ユニクロ・緑のヒートテック重ね着術」に「色の合わせ方が神すぎる」と称賛 センス抜群の着こなしが参考になる
- “双子モデル”りんか&あんな、成長した姿に驚きの声 近影に「こんなにおっきくなって」「ちょっと見ないうちに」
- 犬が同じ場所で2年間、トイレをし続けた結果…… 笑っちゃうほど様変わりした光景が379万表示「そこだけボッ!ってw」
- 新幹線で「高級ウイスキー」を注文→“予想外のサイズ”に仰天 「むしろすげえ」「家に飾りたい」