スマホだけでリアルタイムに背景を合成できる「バーチャルスタジオカメラ」がすごい
「Yahoo! JAPAN Hack Day 2018」で最優秀賞を取りました。
12月に開催されたクリエイター・フェスティバル「Yahoo! JAPAN Hack Day 2018」のハッカソンステージで、特殊な機材を使わなくてもスマホだけで背景を合成できるソフト「バーチャルスタジオカメラ」が最優秀賞を受賞しました。作成したのはチーム「二郎は野菜ニンニク派」。この企画はたった24時間で作品を作らなければならないという縛りがあるのですが、とてもそうとは思えないほど実用的な仕上がりになっています。
普通、背景合成を行う場合は緑や青の布を背景に撮影したり、特殊な機材が必要になったりします。バーチャルスタジオカメラのすごいところは、そのような手間や機材を一切必要とせず、スマートフォン1台で背景合成ができる点にあります。
バーチャルスタジオカメラでは、ソフトが自動的に人物を認識し、画像からその部分だけを切り取って別に用意した背景と合成するといった処理を行っています。例えばユーチューバーが自室から動画を配信するとき、自分しか映さず、部屋を見せないといったことが可能です。背景として合成できる画像は任意に設定でき、たとえばワープゾーンにいるような特殊エフェクトを入れたり、あらかじめ用意した動画やリアルタイムの映像にその場で合成するといった、さまざまな使い方が可能です。
同ソフトを動かすには、iPhone Xなどに搭載されているTrueDepthカメラが必要です。ソフトを企画してから受賞にいたるまでの様子がチームメンバーのnoteにまとめられているので、興味のある人はチェックしてみてください。
ハッカソンステージは、クリエイターが24時間で作り上げた作品――アプリ、ガジェット、メディアアートなどを90秒でプレゼンして、そのできばえを競いますが、その中で司会が発した「今すぐやりたいです！ すぐ使いたいです！」というコメントが印象的でした。YouTuberの動画作成、ゲームのライブ配信、ちょっとした自作映画など、いろいろなことに使えそうですね。
関連記事
親が部屋に近づいたらPCとスマホの画面を隠す “親フラ”回避専用という熱いガジェットが開発される
親がノックしてくれない全国のみなさーん！
世界観が完全にストII ディープラーニングで格闘技の動画を格闘ゲーム風にするシステムが登場
KOシーンはスローになる。
ナルトの「螺旋丸」を現実に作れるだと…… 手の中で“光”が形を変えるアート作品に「かっけえ！」「胸熱」の声
実際に触ってみたすぎる……！
「セルフ記者会見マシン」がMaker Faireで大人気 頭を下げると自動でフラッシュがパシャパシャッ
誰でも大物気分。
バーチャルキャラを現実空間にリアルタイム合成 ドワンゴがAR撮影システムを開発
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
「何言ったんだ」 大谷翔平が妻から受けた“まさかの行動”に「世界中で真美子さんだけ」「可愛すぎて草」【大谷翔平激動の2024年 「家族愛」にも集まった注目】
60代女性「15年通った美容師に文句を言われ……」 悩める依頼者をプロが大変身させた結末に驚きと称賛「めっちゃ若返って見える！」
「庶民的すぎる」「明日買おう」 大谷翔平の妻・真美子さんが客席で食べていた？ 「のど飴」が話題に
皇后さま、「菊のティアラ」に注目集まる 天皇陛下のネクタイと合わせたコーデも……【宮内庁インスタ振り返り】
真っ黒な“極太毛糸”をダイナミックに編み続けたら…… 予想外の完成品に驚きの声【スコットランド】
71歳母「若いころは沢山の男性の誘いを断った」 信じられない娘だったけど…… 当時の姿に仰天「マジで美しい」【フィリピン】
新1000円札を300枚両替→よく見たら…… 激レアな“不良品”に驚がく 「初めて見た」「こんなのあるんだ」
家の壁に“ポケモン”を描きはじめて、半年後…… ついに完成した“愛あふれる作品”に「最高」と反響
ザリガニが約3000匹いた池の水を、全部抜いてみたら…… 思わず腰が抜ける興味深い結果に「本当にすごい」「見ていて爽快」
「ほぼ全員、父親が大物芸能人」 奇跡的な“若手俳優の集合写真”が「すごいメンツ」と再び話題 「今や全員主役級」
- ザリガニが約3000匹いた池の水を、全部抜いてみたら…… 思わず腰が抜ける興味深い結果に「本当にすごい」「見ていて爽快」
- ズカズカ家に入ってきたぼっちの子猫→妙になれなれしいので、風呂に入れてみると…… 思わず腰を抜かす事態に「たまらんw」「この子は賢い」
- フォークに“毛糸”を巻き付けていくと…… 冬にピッタリなアイテムが完成 「とってもかわいい！」と200万再生【海外】
- 鮮魚スーパーで特価品になっていたイセエビを連れ帰り、水槽に入れたら…… 想定外の結果と2日後の光景に「泣けます」「おもしろすぎ」
- 「申し訳なく思っております」 ミスド「個体差ディグダ」が空前の大ヒットも…… 運営が“謝罪”した理由
- 「タダでもいいレベル」 ハードオフで1100円で売られていた“まさかのジャンク品”→修理すると…… 執念の復活劇に「すごすぎる」
- 母親から届いた「もち」の仕送り方法が秀逸 まさかの梱包アイデアに「この発想は無かった」と称賛 投稿者にその後を聞いた
- ある日、猫一家が「あの〜」とわが家にやって来て…… 人生が大きく変わる衝撃の出会い→心あたたまる急展開に「声出た笑」「こりゃたまんない」
- 友人のため、職人が本気を出すと…… 廃材で作ったとは思えない“見事な完成品”に「本当に美しい」「言葉が出ません」【英】
- セレーナ・ゴメス、婚約発表 左手薬指に大きなダイヤの指輪 恋人との2ショットで「2人ともおめでとう！」「泣いている」
- 「何言ったんだ」 大谷翔平が妻から受けた“まさかの仕打ち”に「世界中で真美子さんだけ」「可愛すぎて草」
- 「絶句」 ユニクロ新作バッグに“色移り”の報告続出…… 運営が謝罪、即販売停止に 「とてもショック」
- 「飼いきれなくなったからタダで持ってきなよ」と言われ飼育放棄された超大型犬を保護→ 1年後の今は…… 飼い主に聞いた
- アレン様、バラエティー番組「相席食堂」制作サイドからのメールに苦言 「偉そうな口調で外して等と連絡してきて、」「二度とオファーしてこないで下さぃませ」
- 「明らかに……」 大谷翔平の妻・真美子さんの“手腕”を米メディアが称賛 「大谷は野球に専念すべき」
- 「やはり……」 MVP受賞の大谷翔平、会見中の“仕草”に心配の声も 「真美子さんの視線」「動かしてない」
- ドクダミを手で抜かず、ハサミで切ると…… 目からウロコの検証結果が435万再生「凄い事が起こった」「逆効果だったとは」
- 「母はパリコレモデルで妹は……」 “日本一のイケメン高校生”グランプリ獲得者の「家族がすごすぎる」と驚がくの声
- 「ごめん母さん。塩20キロ届く」LINEで謝罪 → お母さんからの返信が「最高」「まじで好きw」と話題に
- 「真美子さんさすが」 大谷翔平夫妻がバスケ挑戦→元選手妻の“華麗な腕前”が話題 「尊すぎて鼻血」