スマホだけでリアルタイムに背景を合成できる「バーチャルスタジオカメラ」がすごい
「Yahoo! JAPAN Hack Day 2018」で最優秀賞を取りました。
12月に開催されたクリエイター・フェスティバル「Yahoo! JAPAN Hack Day 2018」のハッカソンステージで、特殊な機材を使わなくてもスマホだけで背景を合成できるソフト「バーチャルスタジオカメラ」が最優秀賞を受賞しました。作成したのはチーム「二郎は野菜ニンニク派」。この企画はたった24時間で作品を作らなければならないという縛りがあるのですが、とてもそうとは思えないほど実用的な仕上がりになっています。
普通、背景合成を行う場合は緑や青の布を背景に撮影したり、特殊な機材が必要になったりします。バーチャルスタジオカメラのすごいところは、そのような手間や機材を一切必要とせず、スマートフォン1台で背景合成ができる点にあります。
バーチャルスタジオカメラでは、ソフトが自動的に人物を認識し、画像からその部分だけを切り取って別に用意した背景と合成するといった処理を行っています。例えばユーチューバーが自室から動画を配信するとき、自分しか映さず、部屋を見せないといったことが可能です。背景として合成できる画像は任意に設定でき、たとえばワープゾーンにいるような特殊エフェクトを入れたり、あらかじめ用意した動画やリアルタイムの映像にその場で合成するといった、さまざまな使い方が可能です。
同ソフトを動かすには、iPhone Xなどに搭載されているTrueDepthカメラが必要です。ソフトを企画してから受賞にいたるまでの様子がチームメンバーのnoteにまとめられているので、興味のある人はチェックしてみてください。
ハッカソンステージは、クリエイターが24時間で作り上げた作品――アプリ、ガジェット、メディアアートなどを90秒でプレゼンして、そのできばえを競いますが、その中で司会が発した「今すぐやりたいです! すぐ使いたいです!」というコメントが印象的でした。YouTuberの動画作成、ゲームのライブ配信、ちょっとした自作映画など、いろいろなことに使えそうですね。
関連記事
- 親が部屋に近づいたらPCとスマホの画面を隠す “親フラ”回避専用という熱いガジェットが開発される
親がノックしてくれない全国のみなさーん! - 世界観が完全にストII ディープラーニングで格闘技の動画を格闘ゲーム風にするシステムが登場
KOシーンはスローになる。 - ナルトの「螺旋丸」を現実に作れるだと…… 手の中で“光”が形を変えるアート作品に「かっけえ!」「胸熱」の声
実際に触ってみたすぎる……! - 「セルフ記者会見マシン」がMaker Faireで大人気 頭を下げると自動でフラッシュがパシャパシャッ
誰でも大物気分。 - バーチャルキャラを現実空間にリアルタイム合成 ドワンゴがAR撮影システムを開発
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
-
2カ月赤ちゃん、おばあちゃんに少々強引な寝かしつけをされると…… コントのようなオチに「爆笑!」「可愛すぎて無事昇天」
-
「ゆるキャン△」のイメージビジュアルそのまま? 工事の看板イラストが登場キャラにしか見えない 工事担当者「狙いました」
-
もう別人じゃん! miwa、大胆イメチェンで面影ゼロに「まさかのこんな色になってるとは」「だれー!?」
-
「ぶち抜きたいです」 辻希美、懇願拒否された13歳長男が“荒くれ反抗”……息子の室内破壊に嫌悪あらわ「言葉が出ない」
-
異世界転生したローソン出現 ラスボスに挑む前のショップみたいで「合成かと思った」「日本にあるんだ」
-
「キュウリが冷凍できるとは76年も生きて来て知らんかったなあ」 野菜ソムリエプロが教える冷凍&活用アイデアが328万再生
-
「虎に翼」、壮絶過去演じた16歳俳優に注目の声「違国日記の子か!」 「ブラッシュアップライフ」にも出演
-
築36年物件の暗くてボロいトイレをリメイク→ぐーんと垢抜け! 驚きのビフォアフに「すごいですね!」「天才」の声
-
【今日の計算】「13+8×2−11」を計算せよ
-
辻希美&杉浦太陽、15歳迎えた長女のレアな“顔出しショット”でお祝い 最近は「恋バナ」で盛り上がることも
- 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
- 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
- 安達祐実、成人した娘とのレアな2ショット披露 「ママには見えない!」「とても似ててびっくり」と驚きの声
- 兄が10歳下の妹に無償の愛を注ぎ続けて2年後…… ママも驚きの光景に「尊すぎてコメントが浮かばねぇ」「最高のにいに」
- “これが普通だと思っていた柴犬のお風呂の入れ方が特殊すぎた” 予想外の体勢に「今まで観てきた入浴法で1番かわいい」
- 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
- 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評
- お花見でも大活躍する「2杯のドリンクを片手で持つ方法」 目からウロコの裏技に「えぇーーすごーーい」「やってみます!」
- 弟から出産祝いをもらったら…… 爆笑の悲劇に「めっちゃおもろ可愛いんだけどw」「笑いこらえるの無理でした」
- 3カ月の赤ちゃん、パパに“しーっ”とされた反応が「可愛いぁぁぁぁ」と200万再生 無邪気なお返事としぐさから幸せがあふれ出す
- フワちゃん、弟の結婚式で卑劣な行為に「席次見て名前覚えたからな」 めでたい場でのひんしゅく行為に「プライベート守ろうよ!」の声
- 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果…… 驚愕の正体が230万表示「こんなん噴くわ!」
- 水道検針員から直筆の手紙、驚き確認すると…… メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
- フワちゃん、収録中に見えてはいけない“部位”が映る まさかの露出に「拡大しちゃったじゃん」「またか」の声
- スーパーで売れ残っていた半額のカニを水槽に入れてみたら…… 220万再生された涙の結末に「切なくなった」「凄く感動」
- 桐朋高等学校、78期卒業生の答辞に賛辞やまず 「只者ではない」「感動のあまり泣いて10回読み直した」
- 「これは悲劇」 ヤマザキ“春のパンまつり”シールを集めていたはずなのに…… 途中で気づいたまさかの現実
- 「ふざけんな」 宿泊施設に「キャンセル料金を払わなくする方法」が物議 宿泊施設「大目に見てきたが厳格化する」
- がん闘病中の見栄晴、20回以上の放射線治療を受け変化が…… 「痛がゆくなって来ました」
- 食べ終わったパイナップルの葉を土に植えたら…… 3年半後、目を疑う結果に「もう、ただただ感動です」「ちょっと泣きそう」