楽譜をその場でスキャン、リアルタイムに演奏できるデバイス「Gocen」
首都大学東京の研究者が、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発した。
首都大学東京 馬場哲晃助教のグループは、手書きの譜面をスキャンデバイスでなぞっていくことで、リアルタイムに演奏ができるシステムを開発しました。
まずは五線の場所を見て、その後音符の場所を見て、その音符が五線譜のどの位置にあるかというので、音高を判断します。それに加え、ピアノやギターなどの文字をスキャナで直接読むとコンピュータが自動的に文字を認識して、楽器を変更してくれます。また、例えばこの曲の調はCメジャーじゃなくて、Fマイナーだという時には、「Fm」という文字を読むと楽譜にフラットが4つ付くといった機能があります。
楽譜画像は、OpenCVライブラリと独自アルゴリズムによって解析されています。演奏ラインが音符上にある間、その音程を発音し続け、主に弦楽器の場合は、音を鳴らした後デバイスを上下に動かすことで音程にゆらぎをつけることができます。
また、音符の大小は音量として扱われ、和音にも対応しています。
元々、楽譜出版社と話してる中でできたアイデアです。楽譜の活用の仕方というのが、譜面台に立てて演奏するくらいしか今まで無かったんですが、楽譜があればリアルタイムに演奏ができたり様々な表情付けが楽譜の上からできるので、例えば小学校や音楽教室で音楽の初学者に向けて、五線譜の学習の敷居が下がると思います。
コンピュータを使って、作曲される方はたくさんいますが、どんな楽曲にしようかとかどんなメロディをつくろうかという創作の初期段階において、紙というのは有効に機能するというのは研究からも分かっていて、そういった部分でこのシステムは作曲支援システムとしても非常に有効だと感じています。
関連記事
- ローランド、デジタルピアノ「HPi-50」と電子ドラム「TD-4KP-S」を発売
液晶画面の搭載で譜面のほか練習用ソフトやゲームなどが楽しめるデジタルピアノと、折りたたんで持ち運び可能な電子ドラムが、ローランドからそれぞれ発売される。 - 日々是遊戯:マリオにゼルダ、ピカチュウも! ゲームキャラ続々登場のマーチングバンドに観客興奮しすぎ
演奏もさることながら、一糸乱れぬ動きがスゴい。 - なぜ、人はゲームにハマルのか?:第21回:ゲームは耳でも楽しめる! 効果音による快感演出のマジック
「なぜ、人はゲームにハマルのか?」をまじめに考察する不定期企画の21回目は、ビデオゲーム独特の効果音に焦点を当ててみました。 - ミクは巨大な水の女王。39祭りに行ってきたよ
雨女のミクさんらしいウォーターステージでのライブもあったPS Vita「初音ミク -Project DIVA- f」発売記念前夜祭「夏の終わりの39祭り」に参加してみた。 - 日々是遊戯:「制作者もみんな実況するといいよね」――「ぷよぷよ」「ドシン」「かまいたち」の3人が「ゆめにっき」を実況して感じたこと
8月10日から13日にかけ配信された「SIRENシリーズ+人気ホラーゲーム一挙クリア81時間ぶっ通し! 実況」。人気の生主や実況主らがホラーゲームに挑戦する中、唯一「ゲームクリエイター」枠で参加した、米光一成氏、飯田和敏氏、麻野一哉氏の3人に、ゲーム実況についてどう見ているのか質問をぶつけてみた。 - ミサイルの人気のなさを嘆く場面も! PC版の生みの親も訪れた“洞窟物語3D発売記念プレミアムトーク&ライブショー”をレポート
- 新ジョブ情報も:「FFXI」10周年記念オフラインイベント「ヴァナ☆フェス2012 A DECADE OF FINAL FANTASY XI」をふらりと覗いてみた
PS2初のオンラインタイトルとしてスタートし、様々なユーザーに衝撃を与えた「FINAL FANTASY XI」の10周年を祝したオフラインイベントに潜入。新拡張ディスクの情報もあるよ! - PSP「FINAL FANTASY III」発売決定
「ファイナルファンタジーIII」が9月20日に発売される。価格は3990円(ダウンロード版:3300円)。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
-
「クレオパトラみたい」と言われ傷ついた55歳女性→カット&パーマで大変身! 「本当にびっくり」「素敵なマダムに」
-
伝説の不倫ドラマ「金曜日の妻たちへ」放送から41年、キャストの現在→75歳近影が「とても見えません」と話題
-
余りがちなクリアファイル、“じゃないほう”の使い方で食器棚がまさかのスッキリ 「目からウロコ」「思いつかなかった!」と反響
-
七五三で刀を持っていた少年→20年後には…… “まさかの進化”に「好きなもの突き進んでかっこいい!」
-
野良猫が窓越しに「保護してください」と圧をかけ続け…… ひしひし感じる強い意志と表情に「かわいすぎるw」「視線がすごい」
-
「あのお客さんに幸あれっ!」 小銭の出し方が完璧な“神客”にレジ店員感激 会計がスムーズになる配慮が参考になる
-
「こういうの好き」 割れたコップの破片を並べたら…… “まさかの発想”で息を飲むアート作品に 「すごいセンス良い」「前向きな考え」
-
50代女性「モンチッチみたいにしてほしい」→美容師がプロのワザを見せ…… 別人級の変身に「めっちゃお洒落」「すごい!」
-
「これが免許証の写真???」 コスプレイヤーが公開した“信じられない”免許証が話題 コスプレ姿との比較に「両方とも可愛いすぎる」
-
大型犬が18年間、ドアを開け続けた結果……そうはならんやろな驚きの末路に「どうしたらこんな風になるのよ」の声
- ネットで大絶賛「ブラウニー」にカビ発生 業務スーパーに7万箱出荷…… 運営会社が謝罪
- 「全く動けません」清水良太郎がフェスで救急搬送 事故動画で原因が明らかに「独りパイルドライバー」「これは本当に危ない!!」
- トラックがあおり運転し車線をふさいで停車…… SNSで拡散の動画、運転手の所属会社が謝罪
- 「ヤヴァすぎる!!」黒木啓司、超高級外車の納車を報告 新車価格は5000万円超 2023年にはフェラーリを2台購入
- そうはならんやろ “ドクロの絵”を芸術的に描いたら…… “まさかのオチ”に「傑作」の声【海外】
- 「ウソだろ?」 ハードオフに3万円で売っていた“衝撃の商品”に思わず二度見 「ヤバいことになってる」
- 「結局こういう弁当が一番旨い」 夫が妻に作った弁当に「最強すぎる!」「絶対美味しいビジュアル」
- “メンバー全員の契約違反”をライブ後に発表 異例の脱退騒動背景を公式が釈明「繋がり行為などではなく」
- 「言われる感覚全く分からない」 宮崎麗果、“第5子抱いた服装”に非難飛び……夫・黒木啓司は「俺が言われてるのかな?」
- 大沢たかお、広大プールを独り泳ぐ“バキバキ姿”が絵になり過ぎ 盛り上がる筋肉の上半身に「50代とは思えない」「彫刻みたい」
- “緑の枝付きどんぐり”をうっかり持ち帰ると、ある日…… とんでもない目にあう前に注意「危ないところだった」
- 「しまむら」に行った58歳父→買ってきたTシャツが“まさかのデザイン”で3万いいね! 「同じ年だから気持ちわかる」「欲しい!」
- 友人に「100円でもいらない」と酷評されたビーズ作家、再会して言われたのは…… 批判を糧にした作品が「もはや芸術品」と490万再生
- 高校3年生で出会った2人が、15年後…… 世界中が感動した姿に「泣いてしまった」「幸せを分けてくださりありがとう」【タイ】
- 「ま、まじか!!」 68歳島田紳助、驚きの最新姿 上地雄輔が2ショット公開 「確実に若返ってる」とネット衝撃
- 荒れ放題の庭を、3年間ひたすら草刈りし続けたら…… 感動のビフォーアフターに「劇的に変わってる」「素晴らしい」
- 食べた桃の種を土に植え、4年育てたら…… 想像を超える成長→果実を大収穫する様子に「感動しました」「素晴らしい記録」
- 「天才!」 人気料理研究家による“目玉焼きの作り方”が目からウロコ 今すぐ試したいライフハックに「初めて知りました!」
- 「エグいもん売られてた」 ホビーオフに1万1000円で売られていた“まさかの商品”に「めちゃくちゃ欲しい」
- 義母「お米を送りました」→思わず二度見な“手紙”に11万いいね 「憧れる」「こういう大人になりたい」と感嘆の声