楽譜をその場でスキャン、リアルタイムに演奏できるデバイス「Gocen」
首都大学東京の研究者が、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発した。
首都大学東京 馬場哲晃助教のグループは、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発しました。
まずは五線の場所を見て、その後音符の場所を見て、その音符が五線譜のどの位置にあるかというので、音高を判断します。それに加え、ピアノやギターなどの文字をスキャナで直接読むとコンピュータが自動的に文字を認識して、楽器を変更してくれます。また、例えばこの曲の調はCメジャーじゃなくて、Fマイナーだという時には、「Fm」という文字を読むと楽譜にフラットが4つ付くといった機能があります。
楽譜画像は、OpenCVライブラリと独自アルゴリズムによって解析されています。演奏ラインが音符上にある間、その音程を発音し続け、主に弦楽器の場合は、音を鳴らした後デバイスを上下に動かすことで音程にゆらぎをつけることができます。
また、音符の大小は音量として扱われ、和音にも対応しています。
元々、楽譜出版社と話してる中でできたアイデアです。楽譜の活用の仕方というのが、譜面台に立てて演奏するくらいしか今まで無かったんですが、楽譜があればリアルタイムに演奏ができたり様々な表情付けが楽譜の上からできるので、例えば小学校や音楽教室で音楽の初学者に向けて、五線譜の学習の敷居が下がると思います。
コンピュータを使って、作曲される方はたくさんいますが、どんな楽曲にしようかとかどんなメロディをつくろうかという創作の初期段階において、紙というのは有効に機能するというのは研究からも分かっていて、そういった部分でこのシステムは作曲支援システムとしても非常に有効だと感じています。
関連記事
- ローランド、デジタルピアノ「HPi-50」と電子ドラム「TD-4KP-S」を発売
液晶画面の搭載で譜面のほか練習用ソフトやゲームなどが楽しめるデジタルピアノと、折りたたんで持ち運び可能な電子ドラムが、ローランドからそれぞれ発売される。 - 日々是遊戯:マリオにゼルダ、ピカチュウも! ゲームキャラ続々登場のマーチングバンドに観客興奮しすぎ
演奏もさることながら、一糸乱れぬ動きがスゴい。 - なぜ、人はゲームにハマルのか?:第21回:ゲームは耳でも楽しめる! 効果音による快感演出のマジック
「なぜ、人はゲームにハマルのか?」をまじめに考察する不定期企画の21回目は、ビデオゲーム独特の効果音に焦点を当ててみました。 - ミクは巨大な水の女王。39祭りに行ってきたよ
雨女のミクさんらしいウォーターステージでのライブもあったPS Vita「初音ミク -Project DIVA- f」発売記念前夜祭「夏の終わりの39祭り」に参加してみた。 - 日々是遊戯:「制作者もみんな実況するといいよね」――「ぷよぷよ」「ドシン」「かまいたち」の3人が「ゆめにっき」を実況して感じたこと
8月10日から13日にかけ配信された「SIRENシリーズ+人気ホラーゲーム一挙クリア81時間ぶっ通し! 実況」。人気の生主や実況主らがホラーゲームに挑戦する中、唯一「ゲームクリエイター」枠で参加した、米光一成氏、飯田和敏氏、麻野一哉氏の3人に、ゲーム実況についてどう見ているのか質問をぶつけてみた。 - ミサイルの人気のなさを嘆く場面も! PC版の生みの親も訪れた“洞窟物語3D発売記念プレミアムトーク&ライブショー”をレポート
- 新ジョブ情報も:「FFXI」10周年記念オフラインイベント「ヴァナ☆フェス2012 A DECADE OF FINAL FANTASY XI」をふらりと覗いてみた
PS2初のオンラインタイトルとしてスタートし、様々なユーザーに衝撃を与えた「FINAL FANTASY XI」の10周年を祝したオフラインイベントに潜入。新拡張ディスクの情報もあるよ! - PSP「FINAL FANTASY III」発売決定
「ファイナルファンタジーIII」が9月20日に発売される。価格は3990円(ダウンロード版:3300円)。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
-
「ロッチ」中岡、顔にたっぷり肉を蓄えた激変ショットに驚きの声 「これ…ヤバいって」「すごい変身っぷり」
-
「ごめん母さん。塩20キロ届く」LINEで謝罪 → お母さんからの返信が「最高」「まじで好きw」と話題に
-
「東京チカラめし」約2年ぶりに東京で“復活” まさかの出店場所に驚き「脳がフリーズしそうに」
-
「今までなんで使わなかったのか」 ワークマンの「アルミ帽子」が暑さ対策に最強だった 「めっちゃ涼しー」
-
「ヒルナンデス!」で道を教えてくれた男性が「丁(てい)字路」と発言 出演者が笑う一幕にネットで批判続出
-
大谷翔平がエスコート 真美子さん「ドジャース奥様会」に再び登場で頭ひとつ抜き出る
-
「新紙幣出てきたんだけど」 レジで“千円札”見た若者がポツリ→まさかの正体にショック広がる 「そうだよねえぇ」
-
16歳お姉ちゃんと0歳弟、赤ちゃんが泣くとすぐに抱っこして…… 愛をそそぐ姿に「愛しさ溢れてて号泣」「いいね1万回押したい」
-
地元民向け“バリカタ仕様”の袋麺だと思ったら……思わぬ落とし穴に「トラップ仕掛けられてる」「自分も引っかかった」
-
川をせき止めるほどのゴミ→ボランティアがを徹底的に掃除したら…… 見違える変化に驚き
- 「今までなんで使わなかったのか」 ワークマンの「アルミ帽子」が暑さ対策に最強だった 「めっちゃ涼しー」
- 市役所で手続き中、急に笑い出した職員→何かと思って横を見たら…… 同情せざるを得ない衝撃の光景に「私でも笑ってしまう」「こんなん見たら仕事できない」
- 「ロッチ」中岡、顔にたっぷり肉を蓄えた激変ショットに驚きの声 「これ…ヤバいって」「すごい変身っぷり」
- 「ごめん母さん。塩20キロ届く」LINEで謝罪 → お母さんからの返信が「最高」「まじで好きw」と話題に
- “スケスケ成人式コーデ”が物議のモデル、「3度見される服」を披露 「コレは見ちゃうわ」「洗っても大丈夫なのか」の声
- 「東京チカラめし」約2年ぶりに東京で“復活” まさかの出店場所に驚き「脳がフリーズしそうに」
- 業務スーパーの“高コスパ”人気冷凍商品に「基準値超え添加物」 約1万5000個販売……自主回収を実施
- イオンモールで販売「シフォンケーキ」にカビ発生、5000個回収へ “下痢”の報告で調査中……出店企業が謝罪
- 【今日の計算】「500×99」を計算せよ
- ミュージカル『ディズニー くまのプーさん』、舞台が見えづらいとの指摘に謝罪 「視認性の改善を講じる」
- 庭に植えて大後悔した“悪魔の木”を自称ポンコツ主婦が伐採したら…… 恐怖のラストに「ゾッとした」「驚愕すぎて笑っちゃいましたw」
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
- 「歩行も困難…言動もままならず」黒沢年雄、妻・街田リーヌの病状明かす 介護施設入所も「急激に壊れていく…」
- 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
- 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
- 釣りに行こうとしたら、海岸に子猫が打ち上げられていて…… 保護後、予想だにしない展開に「神様降臨」「涙が止まりません」
- 身長174センチの女性アイドルに「ここは女性専用車両です!!!」 電車内で突如怒られ「声か、、、」と嘆き 「理不尽すぎる」と反響の声
- 築152年の古民家にある、ジャングル化した水路を掃除したら…… 現れた驚きの光景に「腰が抜けました」「ビックリ!」「先代の方々が」
- 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評