Adobeは毎年開催されるMaxカンファレンスで、将来Photoshopやビデオ編集ソフトウェアPremiereなどのアプリに搭載される新技術を「先行公開」しています。これらのデモでは、Photoshopで消したオブジェクトを自動的に置き換える、魔法のようなAdobeの「コンテンツに応じた塗りつぶし」ツールを初めて目にしました。今年の技術デモでは、Adobeが「Sensei」と呼ぶ機械学習技術を活用した、実に素晴らしい画像編集機能が披露されました。その中でも特に印象的なものをいくつかご紹介します。
シーンステッチ
通常、Photoshopで写真からオブジェクトを切り取る場合、アルゴリズムは写真の周囲にあるパターンやテクスチャを探し、その穴を埋めるために使用します。これは便利な機能ですが、不自然なパターンが繰り返されるため、結果から何かが間違っていることが明らかになることがあります。次世代の技術はさらに賢くなり、画像を写真のデータベース全体と比較します。例えば、芝生から何かを切り取った場合、アルゴリズムは屋外の画像から似たような芝生の部分を探し、必要なデータを取得します。
マント
動画から邪魔なオブジェクトを除去するのは容易ではありません。扱いにくいソフトウェアに頼ったり、各フレームを個別に編集したりすることもできますが、それでも各フレームを綿密に比較しないと、結果に一貫性がなくなる可能性があります。Cloakと呼ばれる機能は、オブジェクトを追跡し、シーンスティッチに似た方法で自動的に置き換えながら、フレーム間の邪魔な変動がないようにします。After Effectsなどの他のソフトウェアでも同様の機能が利用可能ですが、うまく機能すれば非常に簡単そうに見えます。
プロジェクト・パペトロン
Photoshopのスタイルフィルターはこれまであまり良くありませんでしたが、このデモは、偽物ではなく、本物の芸術的なスタイルを模倣することに重点を置いています。このアルゴリズムは、線画やその他の媒体で描かれたポートレートを分析し、それを通常のポートレート写真に適用することができます。Prismaなど、同様の機能を持つアプリは他にもありますが、ここで紹介するデモは、オリジナルをはるかに忠実に再現しています。
プロジェクト・スクリブラー
白黒で始まった画像を「カラー化」するというのはあまり好きではないのですが、このディープラーニングベースの画像生成システムは、ワンクリックで素晴らしい仕事をしてくれます。シーンを分析し、驚くほど正確に色を当ててくれます。写真からテクスチャを適用することもできるので、スケッチからハンドバッグのモックアップを作りたい時などにも便利です。
ソニックスケープ
360度シーンを映し出す動画が増えていますが、それに合わせた音声収録は容易ではありません。SonicScapeなら、VRコンテンツを視聴中に頭を動かすと、それに合わせて音声が適切に調整されます。文字通りサラウンドサウンドでありながら、頭の動きに反応します。
フィジックスパック
このデモは、たくさんのオブジェクトを特定の形に収めたいイラストレーターやデザイナー向けに作られています。用途は限定的ですが、動画の約2分後に猫がAの文字を作るアニメーションは魅惑的で、棒人間しか描けない人でも見る価値があります。
これらのデモから非常に明確な点の一つは、AdobeがSenseiプラットフォームにおいて機械学習を重視していることです。人工知能はこれらのデモのあらゆる部分に関わっており、写真、動画、イラスト編集ソフトウェアのほぼすべてにすでに組み込まれています。これは、下手なアーティストにとっても、選択ツールやレンダリングのプログレスバーを見つめる時間を節約したい優秀なアーティストにとっても朗報です。
