スマホだけでリアルタイムに背景を合成できる「バーチャルスタジオカメラ」がすごい
「Yahoo! JAPAN Hack Day 2018」で最優秀賞を取りました。
12月に開催されたクリエイター・フェスティバル「Yahoo! JAPAN Hack Day 2018」のハッカソンステージで、特殊な機材を使わなくてもスマホだけで背景を合成できるソフト「バーチャルスタジオカメラ」が最優秀賞を受賞しました。作成したのはチーム「二郎は野菜ニンニク派」。この企画はたった24時間で作品を作らなければならないという縛りがあるのですが、とてもそうとは思えないほど実用的な仕上がりになっています。
普通、背景合成を行う場合は緑や青の布を背景に撮影したり、特殊な機材が必要になったりします。バーチャルスタジオカメラのすごいところは、そのような手間や機材を一切必要とせず、スマートフォン1台で背景合成ができる点にあります。
バーチャルスタジオカメラでは、ソフトが自動的に人物を認識し、画像からその部分だけを切り取って別に用意した背景と合成するといった処理を行っています。例えばユーチューバーが自室から動画を配信するとき、自分しか映さず、部屋を見せないといったことが可能です。背景として合成できる画像は任意に設定でき、たとえばワープゾーンにいるような特殊エフェクトを入れたり、あらかじめ用意した動画やリアルタイムの映像にその場で合成するといった、さまざまな使い方が可能です。
同ソフトを動かすには、iPhone Xなどに搭載されているTrueDepthカメラが必要です。ソフトを企画してから受賞にいたるまでの様子がチームメンバーのnoteにまとめられているので、興味のある人はチェックしてみてください。
ハッカソンステージは、クリエイターが24時間で作り上げた作品――アプリ、ガジェット、メディアアートなどを90秒でプレゼンして、そのできばえを競いますが、その中で司会が発した「今すぐやりたいです! すぐ使いたいです!」というコメントが印象的でした。YouTuberの動画作成、ゲームのライブ配信、ちょっとした自作映画など、いろいろなことに使えそうですね。
関連記事
親が部屋に近づいたらPCとスマホの画面を隠す “親フラ”回避専用という熱いガジェットが開発される
親がノックしてくれない全国のみなさーん!世界観が完全にストII ディープラーニングで格闘技の動画を格闘ゲーム風にするシステムが登場
KOシーンはスローになる。ナルトの「螺旋丸」を現実に作れるだと…… 手の中で“光”が形を変えるアート作品に「かっけえ!」「胸熱」の声
実際に触ってみたすぎる……!「セルフ記者会見マシン」がMaker Faireで大人気 頭を下げると自動でフラッシュがパシャパシャッ
誰でも大物気分。バーチャルキャラを現実空間にリアルタイム合成 ドワンゴがAR撮影システムを開発
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
昨日の総合アクセスTOP10
華原朋美、“隠し子”巡る夫の虚言癖に怒り「私はだまされて結婚」 家を飛び出した親に2歳息子も「もうパパとはいわなくなりました」
人気動画ジャンル「ゆっくり茶番劇」を第三者が商標登録し年10万円のライセンス契約を求める ZUNさん「法律に詳しい方に確認します」
子猫のときは白かったのに→「思った3倍柄と色出た」 猫のビフォーアフターに「どっちもかわいい!」の声
“お手”を覚えた子柴犬、披露してみると…… まさかの新技に「進化したお手」「かわいすぎる」の声
華原朋美、怒り爆発の騒動から初家族ショット “ファンへの非礼”謝罪した夫の姿に「3人揃って良かった」
生駒里奈、乃木坂46のライブにサプライズ出演し「激アツ」「号泣」「最強」と反響 制服姿で同期メンバーへの感謝メッセージも
タイハクオウムが足をダンダンして荒ぶるワケは…… ママの足の間に入ってご満悦な姿が面白かわいい
ありえない立体「ペンローズの三角形」が粘土で制作される 切れ目無しでの再現に「うおぉぉぉ」「脳がバグる」
ルービックキューブは「2次元」にすると分かりやすい……? 画期的な動画が「天才的発想」「すごいことをしていることだけ分かった」と話題
「あなたのAirpodsではありません」 隣の人がAirpodsの蓋を開け締めしているせいでiPadが操作できない話がおつらい
先週の総合アクセスTOP10
- 名倉潤、妻・渡辺満里奈との結婚17周年に“NY新婚旅行”ショット 「妻には感謝しかありません」と愛のメッセージも
- フワちゃん、指原莉乃同乗のクルマで事故 瞬間を伝える動画が「予想の10倍ぶつけてる」「笑い事ではない」と物議
- 植毛手術のいしだ壱成、イメチェンした“さっぱり短髪”が好評 「凄く似合ってます」「短い方が絶対いい」
- 渡辺裕之、66歳バースデーで息子と2ショット 合同誕生日会に「すごいお料理とケーキ」「イケメン息子さん」
- この写真の中に2人の狙撃手が隠れています 陸自が出したクイズが難しすぎて人気 まじで分からん!
- 神田愛花アナ、バナナマン日村との“夫婦デート風景”にファンほっこり 「幸せあふれてる」「仲良くてステキ」
- 「ビビるくらい目が覚める」「生活クオリティ上がった」 品薄続く「ヤクルト1000」なぜ、いつから人気に? 「悪夢を見る」ウワサについても聞いてみた
- 山田孝之、芸能人として“3億円豪邸”に初お泊まり 突然泣き出すはじめしゃちょーをハグする異例展開で「本当にいい人」
- トム・クルーズ、4年ぶり来日をウマ娘が発表 突然の大物コラボに困惑する声「まず戸田奈津子さんに理解してもらうところから」
- 堀ちえみ、新居ダイニングの解体&再工事が完了 住居トラブルへの怒りも“夫の名言”で鎮火「ハッとしました」
先月の総合アクセスTOP10
- 「普通ではなかった」 坂上忍、「バイキング」卒業翌日に“生放送”の重圧語る 都内自宅取り壊しの決断も明かす
- どうやって着てるんだ! 冨永愛、背中丸見えな“人魚風衣装”に「誰にも真似できない」と反響
- 柴犬が1年ぶりの再会に待ちきれず…… 帰省したお姉ちゃんを見つけてよろこびを爆発させる姿に涙が出る
- 「カムカム」最終回目前、怒涛の展開に視聴者からのツッコミ殺到 「突然のどエラい告白で放送事故」
- 「お綺麗すぎてぶち抜かれた」 フワちゃんが2時間メイクで雰囲気一変、シックな黒ドレスでのモデル姿に称賛の声
- この画像の中に猫が隠れています 見つかるとスッキリなクイズに「わからん」「手こずった」
- 「きもい」「仕事減ったな」水谷隼、誹謗中傷DMへ怒り 「後で泣き喚いても一切同情しないから」
- だいたひかる、虐待の疑いで通報される 警察の訪問受け「アンチが多い事もお伝えしておきました」
- 里田まい、入学準備中の長男に「違う、そうじゃない」 父・田中将大選手そっちのけの推し愛が暴走
- 息子が、大親友ハスキーの「あそんで」を無視した結果…… 激おこワンコとのわちゃわちゃなやりとりに21万いいね