初音ミクが美空ひばりっぽく歌う「歌唱表現転写」技術ができて調教がはかどりそう:OngaCREST 2014
美空ひばりのようなこぶしやビブラートをミクに“転写”できる技術があるんです。
「美空ひばりのようなこぶしで初音ミクに歌ってほしい。でも本格的なパラメータチューニングは難しそう」「スピッツのグリスダウンが好きでたまらない。この曲もスピッツのような歌い方で聞いてみたい」といったことをかなえる技術「歌唱表現転写システム」が京都大学で開発されました。
8月23日に行われた、音と映像に関するシンポジウム「OngaCREST 2014」で京大の池宮由楽さん、糸山克寿さん、吉井和佳さんが発表した「音楽音響信号中の歌声F0軌跡に対する歌唱表現の転写システム」。
歌い方には、ビブラート、こぶし、グリッサンドなどいろいろなテクニックがあります。例えばぼかりす(VocaListener)という技術を使えば、元の歌手の音の揺らし方などの特徴をVOCALOIDに転写することができるわけですが、そのためにはモデルとなる歌唱として、その曲を全部歌う必要があります。
この研究では、楽曲の中から歌声のF0(音の高さの推移)をとらえ、そこからビブラートの速さ、深さ、などの歌唱表現をパラメータで操作可能なレベルに落とし込み、歌唱表現データベースとしています。
この歌唱表現を、ターゲットとなっている歌唱(人の歌声でもVOCALOIDなどの合成歌唱でも)に転写したうえで音色も補正すると、声質は初音ミクだけど歌い方は美空ひばりだよね、といった歌声が生成されます。
デモでは、美空ひばりの「人生一路」などから抽出した歌唱表現を、初音ミクが歌う「Yesterday」に適用し、美空ひばりの深いビブラートやこぶしをミクの声で再現していました。
声質だけでなく歌い方の特徴までモデリングする技術としては、名古屋工業大学のSinsyや、それを元にしたCeVIOが存在しますが、この技術はまた別のアプローチで、任意の部分にボーカルテクニックを転写することが可能であるというところが違います。
また、複数の歌手の歌唱表現データベースを組み合わせて、グリスダウンは草野マサムネ、こぶしは美空ひばり、ビブラートは平井堅といったこともできるみたいです。
そして、この歌唱表現データベースはプロのものに限らないでしょう。元歌唱が最低1曲あればいいので、例えば亡くなった人の歌い方のままに新しい曲を歌ってもらいたいというニーズに応えられるかもしれません。
この研究が進み、一般の人たちが使えるようになる日が来ることを心から願います。
関連記事
俺、歌声になってみたから、歌わせてみない? 楽譜を入力すれば歌ってくれる「Sinsy」の中の人体験
自分の知らないところで、自分の声が、知らない曲を歌っている――そんな展開を期待してます。音声合成・歌声合成の新星「CeVIO」、その謎が解けた!
無償の音声合成・歌声合成ソフト「CeVIO Creative Studio FREE」が公開された。簡単な操作でキャラのおしゃべりを制作できる期待の新星、その開発の経緯やこれからを教えてもらった。ボカロネット? どうせなら作詞もやってくんないかな、というボカロP向け自動作詞ツールを探してみた
怠惰なあなたのために。ニコニコ動画の7年間をひとまたぎするSongrium「超歴史プレーヤ」が便利すぎる
カテゴリごとの栄枯盛衰もまる分かり!「ポケット・ミク」に好きな歌詞を歌ってもらえる祭りが始まったよ
鍵盤をペンでなぞれば初音ミクの歌声で歌ってくれる「ポケット・ミク」がさらに進化。産総研が音楽体験をさらに刺激的にした「おどるSongrium」、お子ちゃま向けの「サビ抜きSongle」を期間限定で提供
4月1日だけなんてもったいない!
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
君島十和子の長女・君島憂樹、 “母上のお洋服”を拝借したシャネルコーデが超絶美人 「お人形さんかと」「素敵すぎ」
「明らかに写真と違う」 東京クリスマスマーケットのフードメニューが物議…… 購入者は落胆「悲しかった」
貞子もビビって逃げ出すレベル 驚異のハイスピードで迫るハムスターの姿に度肝を抜かれる人続出「怖いよ」
藤本美貴、“全然かわいくない値段”のテスラにグレードアップ スマホ一つでの注文に「震えちゃ〜う!」
愛猫に「猫鍋」をもらったのに、夢中になったのは予想外の…… 「違う、そうじゃない」とツッコむ展開に笑ってしまう
秋田犬の子犬、これで生後4カ月!? ベビーデカワンコの抱っこが「“超”大型犬ですよね」「かわいいの塊でたまらん!」と話題
いつも空いているドッグランが大盛況→常連の柴犬が困惑のあまり…… 胸がキュッとする“うろたえっぷり”に応援の声続々
クロちゃん、20歳年下の恋人に旅行持ちかけるも「行かない」 交際1周年のお祝いもなし「1回しっかりしゃべりたい」
笑福亭鶴瓶、夜中に“超一流俳優”たちの呼び出しでパジャマ出動 豪華メンツの泥酔姿に「凄いメンバー」「映画撮れそう」
写真家が「もう二度と撮れません」と語るエゾモモンガの水平飛行 貴重な1枚に「感動しました」「最高です!」と絶賛の声
- 大好物のエビを見せたらイカが豹変! 姿を変えて興奮する姿に「怖い」「ポケモンかと思った」
- 「3カ月で1億円」の加藤紗里、オーナー務める銀座クラブの開店をお祝い “大蛇タトゥー”&金髪での着物姿に「極妻感が否めない」
- 愛犬と外出中「飼いきれなくなったのがいて、それと同じ犬なんだ。タダで持ってきなよ」と言われ…… 飼育放棄された超大型犬の保護に「涙止まりません」
- ミキ亜生、駅で出会った“謎のおばさん”に恐怖「めっちゃ見てくる」 意外な正体にツッコミ殺到「おばさん呼びすんな」「マダム感ww」
- 永野芽郁、初マイバイクで憧れ続けたハーレーをゲット 「みんな見ろ私を!」とテンション全開で聖地ツーリング
- 道路脇のパイプ穴をのぞいたら大量の…… 思わず笑ってしまう驚きの出会いに「集合住宅ですね」の声
- 柴犬が先生に抱っこしてほしくて見せた“奥の手”に爆笑&もん絶! キュンキュンするアピールに「あざとすぎて笑っちゃった」
- 病名不明で入院の渡邊渚アナ、1カ月ぶりの“生存報告”で「私の26年はいくらになる?」 入院直後の直筆日記は荒い字で「手の力も入らない」
- 小泉純一郎元首相、進次郎&滝クリの第2子“孫抱っこ”でデレデレ笑顔 幸せじいじ姿に「顔が優しすぎ」「お孫さんにメロメロ」
- デヴィ夫人、16歳愛孫・キランさんが仏社交界デビュー 母抜かした凛々しい高身長姿に「大人っぽくなりました」
- 「酷すぎる」「不快」 SMAPを連想させるジャンバリ.TVのCMに賛否両論
- 会話できる子猫に飼い主が「飲み会行っていい?」と聞くと…… まさかの返しに大反響「ぜったい人間語分かってる」
- 実は2台持ち! 伊藤かずえ、シーマじゃない“もう一台の愛車”に驚きの声「知りませんでした」 1年点検時に本人「全然違う光景」
- 大好物のエビを見せたらイカが豹変! 姿を変えて興奮する姿に「怖い」「ポケモンかと思った」
- 渋谷駅「どん兵衛」専門店が閉店 店内で見つかった書き置きに「店側の本音が漏れている」とTwitter民なごむ
- 西城秀樹さんの20歳長男、「デビュー直前」ショットが注目の的 “めちゃくちゃカッコいい”声と姿が「お父さんの若い頃そっくり」「秀樹が喋ってるみたい」
- “危険なもの”が体に巻き付いた野良猫、保護を試みると……? 思わずため息が出る結末に「助けようとしてくれてありがとう」【米】
- 「やばい電車で見てしまった」「おなか痛い、爆笑です」 カメがまさかの乗り物で猫を追いかける姿が予想外の面白さ
- おつまみの貝ひもを食べてたら…… まさかのお宝発見に「良いことありそう」「すごーい!」の声
- 「3カ月で1億円」の加藤紗里、オーナー務める銀座クラブの開店をお祝い “大蛇タトゥー”&金髪での着物姿に「極妻感が否めない」