未来がそこまで来ている！アドビが見せた11のわくわくするテクノロジー

ラスベガスで開催中のクリエイティビティ・カンファレンス「Adobe MAX 2017」から、製品に搭載されるかもしれないわくわくする機能が紹介された「Sneaks」の模様を速報でご紹介します。

1. すごい速さでデータビジュアライゼーションを行う「Lincoln」

データビジュアライゼーションはとても手間のかかる作業です。これまでは、ドローイングツールで描くか、テンプレートを使うか、プログラムを書く必要がありました。Lincolnはこれをごく簡単に実現できてしまう機能です。

まずシェイプを作り、リピートグリッドのハンドルをドラッグして繰り返し要素を作ります。

https://blog.adobe.com/media_9140fff8c2c0817f313edc756b52fccd34b1a164.gif

このシェイプを、データとバインド（関連付け）するだけでこの通り、数値に応じた長さに一つ一つのシェイプが変更されて棒グラフが出来上がります。

https://blog.adobe.com/media_f0aa5c8122833a4777bd76777935eccd7c968518.gif

グラフにラベルを表示するのも、リピートグリッドに配置したテキストにデータをバインドするだけです。だいぶグラフっぽくなりました。

https://blog.adobe.com/media_37f290e9b658fc4b27ca9a2e94779078fe0517f8.gif

長さが可変の要素の後ろに、他の要素を付けたい場合は、スティッキーアンカーを作って要素の間をつなぎます。すると、位置関係が自動的に調整されるようになります。下の図では、グラフの右端から等距離に画像が配置されています。

https://blog.adobe.com/media_881013e8acfe8c67f44aace6ec3799c96d61f23a.gif

画像や色もデータとバインドできます。下の図では、項目ごとの国旗や性別のアイコンが、バインドしたデータに沿った画像になっています。これでグラフの完成です。

https://blog.adobe.com/media_5a5021bcec2253f50e85aadc7dcb2f7849a7863a.gif

棒グラフ以外のチャートもつくれます。同じように都市の最低と最高気温のデータをバインディングして円グラフを作りましょう。カラーコントロールを適用すれば下の図ができあがります。

https://blog.adobe.com/media_728e40c9a75982baa6a09164e13b0c5b25595976.gif

ここまでの作業、わずか数分。SVGで書き出してIllustratorでレイアウトすれば、ポスターの完成です。

https://blog.adobe.com/media_ac25c0a2b8a2326e553cf75bc2cd721bad1eddb9.gif

今まで絶望的な時間がかかっていたこういう作業が、Lincolnなら1時間もかからない作業になるかもしれません。すぐにでも使いたい、製品に搭載されるのが待ち遠しい機能です。

2. ポートレートのスタイルを変える「Puppetron」

ポートレートのスタイルを、「お手本」の絵や写真に合わせて変えてしまう機能です。

右がポートレート、左がお手本の絵です。

https://blog.adobe.com/media_6d949e8f71ddc80c1561a5f0f670a1a213460d4e.gif

お手本の絵に合わせてポートレートのスタイルが変わります。

https://blog.adobe.com/media_0765c6d1ac26434c735b76541d458477f52f1791.gif

ちょっとやりすぎましたかね。どのくらい忠実にスタイルを合わせるか、調整できます。もう少し人間成分を増やしてみましょう。

https://blog.adobe.com/media_07f55b646d241b924dd3149c406ac43f22bc2c5c.gif

お手本は絵である必要はありません。写真でも大丈夫です。

https://blog.adobe.com/media_93ce43297999c4aa8ec3448cf0c628a32dc71348.gif

目の部分が元の写真のままで変わっておらず、なんだか凄い違和感を感じます。ここは人工知能、Adobe Senseiの力を借りましょう。

https://blog.adobe.com/media_1a3ee05146ddef35c839277bfb8fe22dcdcf1daf.gif

この通り、うまくスタイルを合わせられました。銅像だって大丈夫です。もはや元のポートレートがどんなものだったか思い出せませんね。

https://blog.adobe.com/media_91c8165fd9215ab49fe1ac77221661442945df9e.gif

ここまでは静止画だったのですが、なんとCharacter Animator CC上でリアルタイムにこの機能が動いていました。

https://blog.adobe.com/media_27cc01c9ed2c9d93f9bf8b8f49cf101538089941.gif

お手本のスタイルのキャラクターが、発表者の表情に合わせてリアルタイムに変化します。これはすごい。

3. 他の写真を使って塗りつぶす「SceneStitch」

例えば写真自体は気に入っているものの、手前の道路が気に入らないとクライアントが言っているとします。

https://blog.adobe.com/media_5b1cb677fb0b856799d7a57bca969b4042537686.gif

Photoshopにはすでに「コンテンツに応じた塗りつぶし」があるので、これを使ってみましょう。

https://blog.adobe.com/media_0b9258dca6d226212dd232e95c586acf8e1d8a3d.gif

悪くないのですが、どうしてもまわりと似たパターンで塗りつぶしされてしまいます。結果が気に入らないときは、他の写真の一部を使って塗りつぶしてしまえばいいのです。SceneStitchは、Adobe Senseiの力を借りて、Adobe Stockの画像から使えそうな部分を見つけて候補を表示します。

https://blog.adobe.com/media_760410a755627129b0a26c95c676ed579c355317.gif

なんという魔法でしょう。複数の候補が表示されるので、最初に表示された画像が気に入らなければ他の候補から選ぶこともできます。

https://blog.adobe.com/media_f6e981f38ce5d700f00197254ea9d46d1952e1bf.gif

別の例を見てみましょう。

https://blog.adobe.com/media_d907401842027ba15936707bfb4cc66af025df1d.gif

建物の前の芝生の部分（赤い線から下）が気に入らないとします。そんな場合は、他の写真に置き換えてしまうことができます。

https://blog.adobe.com/media_f747d30b90e2683682137d93f2c25428042b83d0.gif

なんとテニスコートになってしまいました。単に切り抜いて置いているわけではありません。画像をうまく再生成しています。他にももいろんな風景が合成されています。

Adobe Stockにある膨大な数の画像をセマンティックに検索し、合いそうな写真をみつけて塗りつぶしてくれるすごい機能です。ストックフォトの意味が変わりそうですね。

4. 色付けを自動で行う「Scribbler」

白黒写真の色付けを、人工知能Adobe Senseiの力を借りて、自動的に行ってくれる機能です。

https://blog.adobe.com/media_7cc7ee1e28f798c7e4d198f916344949a7c05acc.gif

アインシュタインもあっという間にカラーで塗られてします。白黒写真だけでなく、イラストでも大丈夫です。

https://blog.adobe.com/media_5c5e7c88319cfcd8fb30fc3f125e673634ca288a.gif

イラスト上にテクスチャーの断片を貼り付ければ、それを利用して着色してもらうこともできます。

https://blog.adobe.com/media_e7cdbc2170a4257f05c4911c5de1bcde796703f6.gif

5. シェイプの中にうまい具合に敷き詰める「Physics-Pak」

何種類かの猫のイラストを、シェイプの中に隙間ができないようにサイズや形を変えながら敷き詰めたいとします。

https://blog.adobe.com/media_0beb4dd0b4734a94a5c44eb267adc8631126498a.gif

Illustratorのパペットワープ機能でもやれますが、3時間はかかるでしょう。これを3分で終わらせます。

https://blog.adobe.com/media_884932ac4768678d379889ec82658698c95b0053.gif

物理シミュレーションを使ったグラフィックス処理ということでした。人工知能Adobe Senseiを使ったセンセーショナルな機能ですね！

6. 絵の具のように色を混ぜてパレットを作る「Playful Palette」

まずは基本となる色をいくつか選びます。

https://blog.adobe.com/media_0049d739e2076febb1633d7eabfbf4cc3f875c53.gif

絵の具を混ぜるように好きな色を作っていけます。使用した色は、円の外周に履歴として残っていきます。

https://blog.adobe.com/media_b23f0fb45920c20cf565092798a37125137be65d.gif

混ぜる前の基本の色を変えれば、混ぜたあとの色も変わります。描いた後から色の選択をやり直すことができるわけです。他にも、肌と目で別のカラーパレットを使い分ける機能などが利用できます。

https://blog.adobe.com/media_6aa7c462172baa64461811420b81f46570734159.gif

7. 360度動画の音を可視化して編集する「SonicScape」

360度動画の編集の問題の１つに、どこから音が来ているかわからず、映像と音の方向を合わせることが難しいことが挙げられます。
これは全方位の音を録音したアンビソニックス・オーディオをビジュアライズする機能です。光の点の塊として表示されたものをドラッグするだけで、音の位置をコンテンツに合わせられます。

https://blog.adobe.com/media_b332bf1c0204456919d6cc69932f0736b516dfb2.gif

環境音に加えて、ディテールの音（例えば海鳥の鳴き声）を、シーンにオブジェクトとして配置することも可能です。

8. フラットに見えるVR動画を立体的に見せる「Sidewinder」

VR動画はものがフラットに見えるのが問題です。まわりをそのまま録画しているので、頭を動かしても、見えているものは変化せず、立体感を感じられません。
この技術はデプスマップを生成して、映っているものを3次元的に見せます。頭を左右に動かせば壁の横が見えるようになり、少しかがむと下のほうが見えるようになります。

https://blog.adobe.com/media_c98d8848e014f24301e18336de4609298c4a03da.gif

9. ラフなイラストから3Dモデルを見つける「Quick 3D」

凄くラフな、こどもが描いた絵のようなものから、3Dモデルを見つけてくる機能です。アドビのインターンが作った機能だそうです。

人工知能Adobe Senseiが、何のイラストか理解し、それに近い3DモデルをAdobe Stockから探してきます。

https://blog.adobe.com/media_f39f742f4cdbd50f2710365ed4d86ed2586441e4.gif

10. いい感じに塗りつぶしてくれる「Deep Fill」

Photoshopの「コンテンツに応じて塗りつぶす」機能は、画像を理解しているわけではないので、あくまでもまわりのピクセルを複製するだけの機能です。

例えばこの写真の目の間の部分には、絆創膏のようなものが貼ってあります。

https://blog.adobe.com/media_a696579af48a62f4055111bd01bf80e722005337.gif

「コンテンツに応じて塗りつぶす」だと、目がコピーされて増えてしまいます（右の画像）。そんなとき、人工知能Adobe Senseiなら、目や鼻などのパーツの意味を認識して、正しく塗りつぶします（真ん中の画像）。鼻は鼻として塗りつぶされているのがわかります。

https://blog.adobe.com/media_e671eeaf60a3ae42c9b448f3b68ba0b01fda1f0d.gif

11. 動画の中の不要なものを消す「Cloak」

動画に消したいものがあるとします。Photoshopで1フレームずつコンテンツに応じた塗りつぶしをやってもうまくいきません。

この機能は、ソースビデオとマスクビデオがさえあれば、動画でコンテンツに応じた塗りつぶしを行うものです。

https://blog.adobe.com/media_35f7f9ae33d4a4cc1ade421448fdfc24d6f54f87.gif

動画から、影も含めて人を丸ごと消してしまうこともできます。なんという魔法でしょうか！

https://blog.adobe.com/media_16841d6c711532f2da0399aa9140bd99391cec02.gif

いかがでしたか？昨年に比べて、人工知能が支援する機能が大幅に増えたように感じました。

Sneaksでは、アドビ社内のエンジニアやデザイナーが、大勢の観客がいる前に出てきて、短い持ち時間の中で未来のテクノロジーを紹介します。ステージに登場するのは社内の厳しい選考を勝ち抜いてきた選りすぐりの技術だそうです。Sneaksは、2日目最後のイベントということもあって、お酒を飲んでいる参加者も多く、ものすごい歓声につつまれます。

アドビが見せてくれたクリエイティビティの楽しい未来に、会場のみんながわくわくしました。これからが楽しみですね。

以上、アメリカ・ラスベガスからお伝えしました。