NECネッツエスアイは、Googleの3D映像技術とHPの専用ハードウェアを組み合わせた企業向けコミュニケーションソリューション「HP Dimension with Google Beam」の取り扱いを開始したことを発表した。

この製品は、専用のメガネやヘッドセットを装着することなく、遠隔地にいる相手を立体映像として表示できるビデオ会議システムで、AIによる3D映像処理や視線追跡技術を活用し、通常のビデオ会議では再現が難しい自然なアイコンタクトや、対面に近いコミュニケーションを実現する。

本稿では、NECネッツエスアイがGoogleと日本HPの協力のもと開催した、報道関係者向けの体験会の様子をレポートする。体験会では、Googleの担当者が技術の仕組みを紹介したほか、NECネッツエスアイと日本HPの担当者が、日本市場での展開方針や想定する活用シーンについて説明した。

  • Google Beam

    Google Beam

メガネなしで相手が立体的に見える「Google Beam」とは?

Google Beamは、Googleが開発した3D映像コミュニケーション技術だ。

体験会に登壇したGoogleの担当者は、手紙や電子メール、音声通話、ビデオ通話へと進化してきたコミュニケーションの歴史を振り返り、Google Beamをその次の段階に位置付けた。従来のビデオ会議では、相手の姿が平面的に表示されるため、対面で会話する際の奥行きや視線の動きを十分に再現できないという課題がある。

Google Beamでは、こうした課題に対応するため、AIを活用した3D映像処理と専用ディスプレイを組み合わせている。同氏は、Google Beamについて「コミュニケーションのあり方を大きく前進させる技術」と説明した。

システムは、離れた場所に設置された2台の専用端末を接続して利用する。利用者は、それぞれの端末の前に座ることで、遠隔地にいる相手と立体映像を通じて会話できる仕組みだ。

最大の特徴は「専用の3Dメガネやゴーグル、ヘッドセットが不要」という点だ。

一般的な3D映像の視聴では専用デバイスを装着する場合があるが、Google Beamではディスプレイ自体に立体映像を表示する仕組みを採用している。また、相手の顔や体の向き、視線の動きなども立体的に再現することで、実際に向かい合っているようなコミュニケーションを可能にしている。

  • 利用のイメージ

    利用のイメージ

6台のカメラとAIで3D映像を生成、視線追跡で自然なアイコンタクトを実現

Google Beamで映し出される3D映像は、複数のカメラで撮影した映像をAIで処理することで生成されているという。

専用ハードウェアには6台の2Dカメラが搭載されており、異なる角度から利用者を撮影する。そして撮影した映像データをGoogle Cloudに送信し、コンピュータービジョンなどのAI技術を活用して3D映像に変換。処理された映像は相手側の専用端末に送られ、立体映像として表示される仕組みだ。

またディスプレイには、光の方向を制御する「ライトフィールドディスプレイ」を採用している。通常のテレビやモニターとは異なり、ディスプレイの表面に特殊な薄いフィルムを設けることで、映像が画面から飛び出して見える効果を生み出しているという。

空間オーディオにも対応し、映像だけでなく音声についても、相手がその場にいるような環境の再現を図っている。

  • Google Beamの仕組み

    Google Beamの仕組み

さらにもう1つの大きな特徴が「視線追跡技術」だ。

一般的なビデオ会議では、相手の顔を画面上で見ていても、カメラの位置とのずれによって、相手からは目線が合っていないように見えることがある。

Google Beamでは利用者の視線を追跡するため、カメラを意識して見つめる必要がなく、自然にアイコンタクトを取りながら会話できるのだ。

1対1のコミュニケーションをアップデート

現在、Google Beamの活用シーンは基本的に1対1での利用が想定されている。

NECネッツエスアイは、主な利用シーンとして「採用面接」「人材育成・メンタリング」「生産性向上・コラボレーション」「重要な対話」「遠隔チームの連携」「経営層の意思決定」という6つを挙げている。

特に、1対1のコミュニケーションを重視する採用面接や人材育成、経営層同士の重要な意思決定などでの活用に優位性があるのに加えて、遠隔地にいる専門家と顧客をつなぐ相談窓口への導入なども顧客に提案しているという。

  • Google Beamの6つの活用シーン

    Google Beamの6つの活用シーン

Googleは「複数人での3D会議についても開発を進めている」と説明する一方、大人数が参加する会議よりも、少人数で行う重要な対話を主な用途として想定しているという。すべての会議を3Dに置き換えるのではなく、対面で行うことが望ましい重要なコミュニケーションを、場所に制約されず実施できるようにすることを目指している。

NECネッツエスアイは、日本国内で「HP Dimension with Google Beam」の取り扱いを開始し、導入から運用までを支援する。ハードウェアの提供に加え、Google MeetやZoomなどの既存のビデオ会議プラットフォームとの連携、ネットワーク環境の構築、会議室の設計などを含めたトータルインテグレーションを提供する。

非言語コミュニケーションが39%増加、Googleの研究で確認された効果

体験会では、Googleが2023年4月に公表した、Google Beamにつながる3Dコミュニケーション技術の研究開発プロジェクト「Project Starline」の行動研究結果も紹介された。

同研究では、3D映像を利用したコミュニケーションにおいて、通常のビデオ会議と比較して、身ぶりや表情などの非言語コミュニケーションが39%増加したほか、会話相手への集中度が14%向上したという結果が出たという。

さらに、会話内容の記憶・定着率は28%向上し、会話の順番を交代しながら発言する頻度も37%増加したという。

  • Googleが2023年4月に公表した「Project Starline」の行動研究結果

    Googleが2023年4月に公表した「Project Starline」の行動研究結果

実際に筆者も製品を体験させてもらったが、椅子に座ってモニターを見るだけで、画面の向こうの別の部屋にいる人が、まるで同じ空間に存在しているように感じられた。

画面の向こうの担当者が手元にさまざまなアイテムを持って説明する、というデモンストレーションが行われたが、通常のオンライン会議の時とは違い、本当に手に取れるのではないかと錯覚するほどリアルにアイテムが見え、コミュニケーションが円滑に進むのが感じられた。

また特徴としても挙げられている「視線追跡技術」のおかげで、オンライン会議だとよく発生する「画面とカメラを交互に見なくてはいけない」という点が解消されており、ストレスなく、画面の中の人と目線を合わせて会話をすることができた。