本日開催された Google I/O カンファレンスでは、AI が聴衆の最大の焦点ですが、ARCore のアップデート、新しい Geospatial Creator の発表など、AR 関連のテクノロジーやアプリケーションのアップデートも次々と行われています。 。
ARCore は 5 年間提供されており、Google は毎年 AR テクノロジーの開発を推進し続けています。初期の単純な AR 画像オーバーレイ エフェクトや AR フェイス フィルターと比較して、Google は現在、昨年 Google Earth とストリート ビュー データを統合した地理空間 API など、より大規模な LBS AR アプリケーション シナリオを検討しています。一方、ARCore をサポートする Android デバイスの数は 14 億台に達しました。
ハードウェアに関しては、GoogleがNorth Focalsを買収して以来、外部の世界は同社が新しいARグラスを発売することを期待していたが、どうやらそれほど早くはないようだ。今年2月、GoogleはAR事業をソフトウェアとハードウェアの2つに分割し、Samsung XRデバイス向けのAndroidベースのオペレーティングシステムの開発を発表したが、この観点から見ると、依然としてソフトウェアがGoogleのARのハイライトである。仕事。
重要なポイントの要約:
- ARCore の新機能: 平面検出の最適化、EIS 手ぶれ補正、Vulkan のサポート
- 新しい地理空間 API ツール: ストリート ビュー ジオメトリ、屋根アンカー、空間深度、シーン セマンティクス
- ビジュアル AR オーサリング ツール Geospatial Creator
- XR デバイスに関して Samsung と提携
- Google マップ イマーシブ ビューのアップデート
- Project Starline更新
- シンガポール観光局、タイトー、ゲンスラー、クインター等と協力
ARCore の基礎となるテクノロジーの改善
ARCore は Google AR の基盤として毎年最適化および更新されており、今回リリースされた更新内容は次のとおりです。
- より正確な平面認識効果;
- 電子画像安定化 (EIS);
- バルカンはサポートされています。
Google は、ARCore による物理面の識別エラー率が 52% 低下したことを指摘しました。これは、AR が物理空間とよりよく統合され、地面、デスクトップ、その他の表面に正しく固定され、カビの侵入を回避できることを意味します。
EIS の主な機能は手ぶれを軽減することであり、これによりビデオ撮影効果が向上するだけでなく、LBS AR の安定性も最適化されます。カメラ内の小さな動きを検出し、画像を移動して補正することで機能します。
これまで、ARCore アプリケーションはすでに OpenGL グラフィック インターフェイスをサポートしていましたが、将来的には Vulkan をサポートし、より優れたクロスプラットフォーム機能を実現する予定です。
地理空間 API の新機能
I/O 2023 中に、Google は LBS AR 開発の没入感とリアリズムの最適化を目的とした ARCore Geospatial API 用のさらに多くの AR ツールを発表しました。これらの新しいツールには、Street View Geometry API、Roof Anchors API、Geospatial Depth API、Scene Semantics API が含まれます。
1) ストリートビュージオメトリAPI
実際のシーンの地形、建物、その他の構造をモデル化できるため、AR コンテンツと物理環境を正確にオクルージョンして相互作用したり、建物を再スキンしたりできます。
この API は Android および iOS システムと互換性があると報告されています。
2) ルーフアンカー API
このツールを使用すると、開発者は建物の実際の高さを考慮して、AR コンテンツを建物の上に固定できます。以前、Google は開発者が AR を特定の座標に正確に配置できるようにする地理空間アンカーと、開発者が正確な高さを設定できるルーフ アンカー API を導入していました。
このツールは、Android と iOS システムの両方とも互換性があります。
3)地理空間深度 API
2019 年、Google は ARCore 用のシンプルなシーン深度認識ツールである Depth API をリリースしました。これは動的な深度アルゴリズムに基づいており、1 台の RGB カメラだけで 3D 深度マップを生成でき、幅広い携帯電話構成に適しています。 。空間深度 API はこれを拡張したもので、ストリート ビュー ジオメトリが有効になっている場合、空間深度 API は自動的に深度 API の適用範囲とスキャン速度を拡張します。
たとえば、AR ストリート ビュー ジオメトリが VPS カバー エリア内にある場合、Depth API はローカルでキャプチャした 3D 深度マップと取得したストリート ビュー ジオメトリ データを結合し、最大 65 メートルの深度を認識できると主張します。
Geospatial Depth API は、Depth API をサポートするすべてのデバイスで使用でき、ToF などの深度センサーを必要としないことが報告されています。ただし、このツールは現在 Android デバイスのみをサポートしています。
4) シーンセマンティクス API
機械学習モデルに基づくリアルタイムのセマンティック情報を AR アプリケーションで提供できるため、AR コンテンツが周囲の環境を理解し、空、建物、木、道路、歩道、車両、人物などのさまざまな要素をマークし、重ね合わせることができます。さまざまな種類のインタラクティブ。このツールは Android システムのみをサポートしていることに注意してください。
上記の新しいツールをデモンストレーションするために、Google はオープンソースの AR デモ アプリケーションをリリースしました。Mega Golf は、ストリート ビュー ジオメトリ API を使用して都市をミニチュア ゴルフ コースに変換し、都市内で巨大なゴルフ ボールでプレーできるようにします。 . 跳ね返り、3D 仮想障害物も回避します。
地理空間クリエイター
Geospatial Creator は、コード不要のビジュアル AR 開発ツールです。その利点は、使いやすく、3D シーン タイル上に直接作成でき、次のような地理空間 API の多くの強力な AR 機能をサポートしていることです。 、地形アンカー、屋根アンカーなど。
プロの開発者向けの ARCore と比較して、Geospatial Creator はクリエイティブ ワーカー、一般ユーザー、企業、またはブランド向けであり、より多くの人が AR コンテンツを作成できるようになります。Googleは、これを使用すれば誰でもわずか数分でLBS ARコンテンツをデザインして公開できると主張している。
現在、このツールは Adobe Aero と Unity の 2 つのアプリケーションに統合されていますが、もちろんここにも矛盾があります。前者は to B および to C アプリケーション、後者は a to B アプリケーションであるため、この 2 つははまだ一般のユーザーに十分に近づいておらず、消費者にはまだ一定の創造的な閾値があります。
実際の作成も非常に簡単で、場所や住所、座標（49カ国をカバー）を検索することで特定の場所の高解像度3Dタイルを呼び出し、これをもとに家族向けなどのLBS ARコンテンツを開発することができます。ナビゲーションやコーヒーショップの店舗看板など。
XR デバイスに関して Samsung と提携
昨年のI/OでGoogleはARグラスのデモを発表しましたが、今年はARハードウェアはないようですが、SamsungのXRデバイス用のオペレーティングシステムの開発を再確認しており、この中でさらなる情報を発表する予定です年。
ルートのイマーシブ ビュー
AIを組み合わせたイマーシブビューのナビゲーションプレビュー機能で、以前提供開始した予定ルートを3Dストリートビューで表示できるイマーシブビューを拡張したものです。この機能は夏には15都市（ロンドン、ニューヨーク、東京、サンフランシスコを含む）に展開される予定だという。
この機能の原理は、AI とコンピューター ビジョンを使用して数十億のストリート ビューと航空写真を統合し、没入型の 3D 地図ルートを生成し、自転車レーン、歩道、交差点、駐車場、その他の情報を直感的に表示できるようにすることであると理解されています。 。また、1 日のさまざまな時間帯におけるこれらのルートの視覚的な変化 (交通量、風景など) や、大気質の情報、天気も確認できます。
さらに、Google は Map Tile API と Aerial View API (プレビュー版) も開始します。このうち Aerial View API を使用すると、開発者はアプリケーションの開発や撮影のために Google マップの鳥瞰図ストリートビュー モデルを呼び出すことができます。3D タイルとも呼ばれるマップ タイルは、Google Earth データに基づく高解像度の 3D シーン グラフを指します。Google マップ プラットフォームと ARCore によって特徴付けられます。データは Google ストリート ビューと Google マップから取得されます。テクスチャは高解像度に基づいています。 -解像度 RGB 光学画像地球のデジタル モデルを構成するコンポーネントとして見ることができます (各タイルは特定の座標に対応します)。さらに、マップ タイルは Cesium Geospatial Alliance の 3D タイル オープン標準に基づいており、CesiumJs などのレンダラーおよび視覚化ライブラリと互換性があります。
Map Tileは49カ国の2,500以上の都市をカバーしており、街区内の交通状況や環境状況などの詳細を可視化（デジタルツイン）できるほか、APIを通じてさまざまな3DやARアプリケーションへの導入も可能だという。
3Dタイル上に3Dコンテンツを重ねてARアプリケーションを作成できます。たとえば、Geospatial Creator では、3D タイルをインポートし、これに基づいて開発できます。
さらに、マップ タイルは、ビジュアルツーリズム、都市計画、建築ビジュアライゼーション、3D ナラティブ、3D ゲーム、シーン開発などのシナリオでも使用できます。
小型のメガネ不要 3D ビデオ システム
Google I/O 2021 カンファレンスで、Google はライト フィールド ディスプレイと 3D リアルタイム ビデオに基づく通信システムである Project Starline を初めて発表しました。これは、裸眼 3D 効果をサポートし、ビデオ通話をより没入感のあるものにすることを特徴としています。欠点は、ハードウェアがかさばり、多くのスペースを占有し、持ち運びができないことです。本日開催された Google I/O 2023 で、Google は小型の Starline プロトタイプを発表しました。これは、AI を使用してハードウェア設計を簡素化するのが特徴で、オフィスワークなどの日常的なアプリケーションにより適しています。
初期の Starline プロトタイプは、3D 画像をキャプチャ/生成するために複雑なマルチカメラ、IR センサー アレイに依存していたと理解されています。対照的に、AI テクノロジーは 3D ビデオ データを合成し、ライト フィールド ディスプレイに投影するため、高品質の 3D 通話に必要な標準カメラは数台だけです。外観的には、先代スターラインは鏡台と同じくらいの大きさで、表示部分が大きな鏡のように見えますが、新型スターラインは一般的な表示画面に近いサイズで、デスクトップに置くことができます。
Starline通話は2Dビデオ通話に比べ、オフラインでの対面コミュニケーションに近く、発信者はリアルな大きさや見た目で会話に参加し、ジェスチャーや目でコミュニケーションをとります。簡単に言えば、さまざまな場所から来た人々を結び付けることができる窓口のようなものです。
協力事例
昨年、Google は Nexus Studios と協力して、Geospatial API に基づいたバーチャル バンド Gorillaz の LBS AR コンサートを開催しました。コンサートはニューヨークやロンドンなど特定の場所でのみ視聴可能で、バンドメンバーを巨人サイズにズームインしてインタラクティブなAR形式で表示するのが特徴で、ARは周囲の建物などとインタラクションできる。バンドメンバーを高層ビルなどに座らせると、その視覚効果は十分に衝撃的です。
本日の I/O カンファレンスで、Google は、Gap、Mattel、Global Street Art、シンガポール観光局、Gensler (Kinsler)、Taito などのパートナーと作成した AR アプリケーションとケースを発表しました。
たとえば、Gap と Mattel は、Adobe Aero および Geospatial Creator ツールを使用して、バービー人形の共同ブランド衣料品の AR ポップアップ広告を作成し、仮想広告看板をニューヨーク広場に直接展開しました。
AR スポーツ ソリューション プロバイダーの Quintar は、AR でも Google と協力し、ARCore Geospatial API、StreetView、Quintar の Q.reality プラットフォームを組み合わせてインタラクティブな AR ソリューションを作成し、PGA ツアーの公式アプリ Quintar Places に AR ナビゲーション機能を導入し、視聴者が実際の現場にカメラを向けて視覚的な方向指示器を表示し、自分自身と目的地までの距離を比較することは、精度が十分に良い（数センチメートル以内）と主張しています。
メキシコシティ、ロンドン、ロサンゼルスには、Google Geospatial API に基づいた LBS AR ストリート アート アプリケーションもいくつかあります。たとえば、Google Art and Culture は Global Street Art と協力し、3 人の有名アーティストを招待して LBS AR を使用して壁画を作成し、伝統的な壁画をより鮮やかにしました。
また、Googleはシンガポール観光局と協力し、VisitSingapore公式アプリ（夏頃提供開始予定）に、基本的なAR説明とは異なり、かわいいマスコットを使って観光スポットや文化、歴史を紹介するARツアー機能を導入しました（夏頃リリース予定）。 、および提供 訪問者には、インタラクティブな AR シンフォニー パフォーマンスが提供されます。
国際的に有名な建築コンサルタント会社である Gensler は、Geospatial Creator を使用して、政策立案者がホームレスに対する新たな都市プロジェクトの影響を想定できるように設計された非営利の AR 視覚化プロジェクトを作成しました。
Google はまた、タイトーと協力して、Geospatial API と Streetscape Geometry API に基づいて開発された LBS AR ゲーム「スペース インベーダー: ワールド ディフェンス」をリリースしました。これは、実際の建物にポータルを固定し、スペース インベーダーを解放することができます。これらのインベーダーは、空 適度にどこでも行動でき、行動も周囲の環境に適応することができます（建物の陰に隠れるなど）。
要約すると、Geospatial API は、テーマパーク、コンサート、見本市、スポーツ イベント、屋外アート ギャラリー、ショッピング モールなど、さまざまなシナリオ向けの AR ナビゲーション システムを開発するために使用できます。
Googleはまた、LBS ARの開発とARの潜在的な応用シナリオの探索のために、Google MapとGoogle Earthプラットフォームの3Dデータを開発者に公開すると約束した。さらに重要なことは、これらの LBS AR アプリケーションは、将来的には同じマップベースのインターフェース内で相互に関連付けられる可能性があり、たとえば、ユーザーが Google マップで自分の周囲で体験できる LBS AR アプリケーションを発見できるようにするなどです。
Google は、Google マップをベースとしてユビキタス AR エコシステムのサポートを提供していますが、構築しているのは特定のアプリケーションではなく、大量のコンテンツを含む AR プラットフォームです。GoogleのARツールはクロスプラットフォームに対応しているのが利点で、一部の機能は互換性の良いiOSにも対応しています。同時に、Google Earth やストリートビューデータと組み合わせた地理空間 API は Google AR のキラー機能とみなされ、将来の屋外 LBS AR を背景に大きな需要となっています。AR の方向性に関して、Google は「急いでいない」ように見えますが、実際には全社の技術力を統合して、地理空間は AR のキラー シナリオの 1 つである可能性があることを全員に伝えようとしています。参考：Google