Facebookの新しいカメラエフェクトプラットフォームは、あなたの現実全体を拡張することを目指しています Facebookの新しいカメラエフェクトプラットフォームは、あなたの現実全体を拡張することを目指しています

Facebookの新しいカメラエフェクトプラットフォームは、あなたの現実全体を拡張することを目指しています

Facebookの新しいカメラエフェクトプラットフォームは、あなたの現実全体を拡張することを目指しています
Facebookの拡張現実
F8カンファレンスで、Facebookは仮想世界でオブジェクトを認識して操作できる機能を披露した。Facebook

私たちの多くは外出時に多くの時間を画面を見ていますが、拡張現実(AR)の究極の目的は、私たちが画面を通して現実を見ることです。本日、FacebookのF8カンファレンス基調講演で、マーク・ザッカーバーグは、ARをユーザーの眼球を完全に支配するための同社の取り組みの主要な側面に据える計画を概説しました。カメラエフェクトプラットフォームは、スマートフォンやタブレットに既に搭載されている画像デバイスを基盤として構築されており、ザッカーバーグはこれを「最初の主流ARプラットフォーム」としてさらに確固たるものにしたいと考えています。

Facebookアプリはすべてカメラを統合し、スマートフォンをFacebook搭載の半透明ヘッドアップディスプレイに変え、世界をフィルタリングし、情報や気を散らすものなどを提供するという構想を描いています。FacebookのARパズルの最初の2つのピースは、ニュースフィード内の画像や動画を囲むインタラクティブなラッパーを作成するためのFrame Studioと、より複雑な機能を開発するためのAR Studioです。

カメラエフェクトプラットフォームは本日クローズドベータ版として公開されます。ザッカーバーグ氏は、スマートフォンを使って拡張現実の世界を見るこのシステムは、将来的に避けられないヘッドマウントデバイス(彼は具体的に「グラス」と呼んでいました)への第一歩であると率直に認めています。もちろん、ヘッドマウントAR自体は目新しいものではありませんが、一般ユーザーにはまだ浸透していません。

このシステムは、同時自己位置推定・マッピング(SLAM)技術を基盤としており、シーン内の物体間の空間関係を判定することができます。これはAR、VR、ロボティクス業界ではすでに馴染みのある用語です。同社は、ここ数年で物体認識技術において飛躍的な進歩を遂げたと主張しており、ソフトウェアがフレーム内の物体を認識し、視聴者の体験に合わせて操作することが可能になっています。人物を認識できるだけでなく、人物の個々の部位やポーズも認識できます。デモを見る限り、コーヒーカップの認識も非常に優れているようです。

Facebookのオブジェクト認識
Facebook の物体認識技術は、同社の拡張現実を推進する上で大きな役割を果たしている。Facebook

位置情報データは、ユーザーがどこにいるのかを認識し、環境とどのようにインタラクションできるのかを把握する上で大きな役割を果たします。例えば、レストランでメニューを見ているときに、過去にそこで食事をした友人からのARレビューやメニューの提案が表示されるようになるかもしれません。

基調講演で披露された他のデモも同様に印象的でした。例えば、タワーディフェンスゲームでは、複数のプレイヤーが現実世界のテーブルに置かれたARの敵を叩き落とします。別のデモでは、水や跳ねるボールなどの仮想オブジェクトで満たされた現実の部屋の映像が映し出され、これらのオブジェクトは部屋の中のオブジェクトに反応します。また、デモにはFacebookの他の技術も組み込まれており、例えば商品をクリックするだけで購入できる機能も見られます。こうしたAR技術は、SamsungとGalaxy S8スマートフォンに搭載されている新しい仮想アシスタント「Bixby」にとっても大きな話題となっています。

コマースという根底にあるテーマは広く浸透しており、これは驚くべきことではありません。ARは、ユーザーが欲しい商品を見てから購入できるまでのギャップを効果的に縮めます。また、Facebookの数十億ドル規模の広告事業にも大きな影響を与えます。ターゲティング広告に活用できるパーソナライズされたデータは現在非常に価値が高いため、ARに侵入する商品の増加に対する懸念は根拠のないものではありません。

現時点では、カメラ エフェクト プラットフォームは、反応型フィルターや背景を自撮りに追加するなど、より一般的な用途に基盤を置いていますが、ここで Snapchat の問題に触れます。

新世界レンズのご紹介

本日、Snapchatはスマートフォンの前面カメラ(あるいは自撮りカメラ)でAR体験を引き出し、背面カメラを通して現実世界に投影するアップデートをリリースしました。Snapchatの人気フィルター技術を使って、笑顔の虹を現実世界に投影できるようになりました。

Snapchat の新機能は実に素晴らしいが、Facebook は消費者とクリエイターの両方にとって現実世界へのデジタル フィルターとして機能することで、実現したいことをより広い視野で提示している。

FacebookはARサービスへの支持を高めるため、コンテンツクリエイターがコーディングの知識を必要とせずにデジタルオブジェクトを作成できるARスタジオも発表しました。デモでは、ビデオゲーム用の宇宙ヘルメットの作成も披露されましたが、これはSnapchatの数多くの顔フィルターの一つとして違和感なく映えるでしょう。

今のところ、ARは仮想現実と共存することになるだろう。特にFacebookがOculusに巨額の投資を行っていることを考えるとなおさらだ。同社は、仮想現実パーティーを演出するための「Spaces」という新たな取り組みを発表した。

Facebookの拡張現実コード
この物体認識技術の一部がFacebook社外の開発者に提供されるのは今回が初めてです。Facebook

まだ試したことはありませんが、このアプリ全体はSecond Lifeを彷彿とさせます。Second Lifeは、ヘッドセットや一般向け360度カメラが登場する前の時代に仮想現実を作ろうとした、ほぼ廃止されたプラットフォームです。ある意味、SpacesはARカメラプラットフォームの逆のようにも感じられます。アバターが勢揃いした漫画のような世界で、仮想スクリーンや共有写真を通して現実世界を垣間見ることができるのです。

しかし、基調講演から得られた大きな教訓の一つは、Facebookがこれを没入感への第一歩と捉えている点です。講演者たちは、拡張現実(AR)と仮想現実(VR)への移行はまだ「1%」しか終わっていないと頻繁に言及しています。明らかに、これらの技術の融合をさらに進めることが目標のようです。現実世界と仮想世界の間の理想的なバランスは今のところ流動的ですが、Facebookが私たちがどこに辿り着こうとも、大きな役割を果たしたいと考えていることは明らかです。