楽譜をその場でスキャン、リアルタイムに演奏できるデバイス「Gocen」

首都大学東京の研究者が、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発した。

» 2012年11月12日 09時00分 公開
[DIGINFO TV]
DIGINFO TV

 首都大学東京 馬場哲晃助教のグループは、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発しました。

まずは五線の場所を見て、その後音符の場所を見て、その音符が五線譜のどの位置にあるかというので、音高を判断します。それに加え、ピアノやギターなどの文字をスキャナで直接読むとコンピュータが自動的に文字を認識して、楽器を変更してくれます。また、例えばこの曲の調はCメジャーじゃなくて、Fマイナーだという時には、「Fm」という文字を読むと楽譜にフラットが4つ付くといった機能があります。

 楽譜画像は、OpenCVライブラリと独自アルゴリズムによって解析されています。演奏ラインが音符上にある間、その音程を発音し続け、主に弦楽器の場合は、音を鳴らした後デバイスを上下に動かすことで音程にゆらぎをつけることができます。

 また、音符の大小は音量として扱われ、和音にも対応しています。

元々、楽譜出版社と話してる中でできたアイデアです。楽譜の活用の仕方というのが、譜面台に立てて演奏するくらいしか今まで無かったんですが、楽譜があればリアルタイムに演奏ができたり様々な表情付けが楽譜の上からできるので、例えば小学校や音楽教室で音楽の初学者に向けて、五線譜の学習の敷居が下がると思います。

コンピュータを使って、作曲される方はたくさんいますが、どんな楽曲にしようかとかどんなメロディをつくろうかという創作の初期段階において、紙というのは有効に機能するというのは研究からも分かっていて、そういった部分でこのシステムは作曲支援システムとしても非常に有効だと感じています。

Copyright(c) Digitized Information, Inc. All Rights Reserved.

昨日の総合アクセスTOP10
  1. /nl/articles/2406/16/news001.jpg 「値段を三度見くらいした」 ハードオフに38万5000円で売っていた“予想外の商品”に思わず目を疑う
  2. /nl/articles/2405/19/news005.jpg 「思わず笑った」 ハードオフに4万4000円で売られていた“まさかのフィギュア”に仰天 「玄関に置いときたい」
  3. /nl/articles/2406/16/news017.jpg 2歳娘とかくれんぼ中のパパ、「もういいよー」が聞こえず目を開けると…… まさかの光景に「かわいすぎ!!」「永遠に始まらないww」
  4. /nl/articles/2406/15/news022.jpg 「絶対当たったわこれ」→「は?」 ガリガリ君の棒に書かれていた“衝撃の文章”に「そうはならんやろ」
  5. /nl/articles/2406/15/news025.jpg 【今日の計算】「50×50+50」を計算せよ
  6. /nl/articles/2406/16/news044.jpg 掃除中のママ、物音に振り返った瞬間…… 息子の“やばすぎる”行動に絶望 「もう笑うしかない」「まじこれ世界共通」【米】
  7. /nl/articles/2406/14/news136.jpg 家でポン・デ・リングを作ったら悲劇が…… まさかの姿に変身したドーナツに「爆笑した」「エンターテイナー」 3年後、再挑戦したのか聞いてみた
  8. /nl/articles/2406/16/news049.jpg 「天才見つけた」 ご飯の粗熱をすぐ取りたい→“予想外すぎる方法”を編み出した人に仰天 「効率良いな」
  9. /nl/articles/2406/16/news039.jpg 「こんなことになるのか」 ドラゴンフルーツ、白い服は控えたほうがいい理由 「翌日のトイレもなかなかです」
  10. /nl/articles/2406/15/news008.jpg 「え?」 “ごみだらけの道”を掃除したら…… あらわになった“まさかの正体”に世界中が驚き 「信じられない」【海外】
先週の総合アクセスTOP10
  1. 「虎に翼」、共演俳優がプライベートで旅行へ “決別中”の2人に「ドラマではあまり見ることが出来ない全力笑顔」
  2. 「ハードオフには何でもある」 → 4万4000円で売られていた“とんでもないモノ”に「これは草www」「見てるだけでワクワクする」
  3. 釣りから帰宅、持ち帰った謎の“ニュルニュル”を水槽に入れてたら…… いつの間にか誕生した意外な生き物に「すごおー」「どこまで育つかな!?」
  4. 「この家おかしい」と投稿された“家の図面”が111万表示 本当ならばおそろしい“状態”に「パッと見だと気付けない」「なにこれ……」
  5. 「さざれ石に苔のむすまで」何日かかる? 毎日欠かさず水やりし続けてまもなく1年、チャレンジの結果に「わびさび」「継続は力」
  6. 朝ドラとは雰囲気違う! 「虎に翼」留学生演じた俳優、おなかの脇がチラ見えな夏らしいショットに反響「とてもきれい」
  7. フードコートでふざけたパパ、1歳娘に怒られる→8年後の“再現”が1185万再生 笑えるのに涙が出る光景に「大きくなった!」「泣ける」
  8. 1歳妹「ん」だけで19歳兄をこきつかい…… 「あれで分かるにいに凄い」「ツンデレ可愛い」マイペースな妹にほんろうされる姿が280万再生
  9. 「ベランダは不要」の考えを激変させた“神建築”が200万表示 夢のような光景に「こんな家に帰りたい」「うっとり」
  10. 三重県沖であがった“巨大マンボウ”に漁港騒然…… 人間とサイズ比較した驚愕の光景に「でっか!!」「口から何か出てますね」
先月の総合アクセスTOP10
  1. 「今までなんで使わなかったのか」 ワークマンの「アルミ帽子」が暑さ対策に最強だった 「めっちゃ涼しー」
  2. 「現場を知らなすぎ」 政府広報が投稿「令和の給食」写真に批判続出…… 識者が指摘した“学校給食の問題点”
  3. 市役所で手続き中、急に笑い出した職員→何かと思って横を見たら…… 同情せざるを得ない衝撃の光景に「私でも笑ってしまう」「こんなん見たら仕事できない」
  4. 「思わず笑った」 ハードオフに4万4000円で売られていた“まさかのフィギュア”に仰天 「玄関に置いときたい」
  5. 「ごめん母さん。塩20キロ届く」LINEで謝罪 → お母さんからの返信が「最高」「まじで好きw」と話題に
  6. 「二度と酒飲まん」 酔った勢いで通販で購入 → 後日届いた“予想外”の商品に「これ売ってるんだwww」
  7. 幼稚園の「名札」を社会人が大量購入→その理由は…… 斜め上のキュートな活用術に「超ナイスアイデア」「こういうの大好きだ!」
  8. 釣れたキジハタを1年飼ってみると…… 飼い主も驚きの姿に「もはや、魚じゃない」「もう家族やね」と反響
  9. JR東のネット銀行「JRE BANK」、申し込み殺到でメール遅延、初日分の申込受付を終了
  10. サーティワンが“よくばりフェス”の「カップの品切れ」謝罪…… 連日大人気で「予想を大幅に上回る販売」