NEC、スマホ撮影映像から最短1分で高精細3Dモデル生成——人物や障害物をAI除去

NECは、スマートフォンなどの汎用カメラで撮影した映像から、高精細な3Dモデルを最短1分ほどで生成する技術を開発したと発表した。独自のAI技術が人物や一時的な障害物を自動除去し、周囲の映像を基に背景を補完するという。

NECは2026年7月14日、スマートフォンなどの汎用カメラで撮影した映像から、高精細な3Dモデルを最短1分ほどで生成する技術を開発したと発表した。慶應AIセンターとの共同研究による成果で、2027年度中の実用化を目指す。

独自のAI（人工知能）が、映像に映り込んだ人物や一時的な物体を自動で除去し、周囲の映像を基に背景を補完する。これにより、現場での撮影から短時間でクリーンな3Dモデルを生成できるという。

近年、インフラ事業者や建設業の現場では、人材不足や設備点検に伴う移動コストの増加を背景に、現場の映像を遠隔地の監督者と共有し、リモートで判断や指示を行う取り組みが広がっている。一方、映像の共有だけでは、確認したいシーンや視点を迅速に特定しにくいという課題があった。

自由な視点から現場を確認できる3Dモデルの活用も期待されているが、高価な専用機材の準備や、現場の稼働を中断して行う撮影、3Dモデルの生成に要する時間などが導入の障壁になっていた。

同技術は、広がりを持った粒の集合で空間を表現する「ガウシアンスプラッティング」に、NEC独自のAIを組み合わせた。映像内の見た目の複雑さを解析し、複雑な部分には3Dモデルを構成する粒を高密度に配置する一方、単調な部分では粒を間引く。

これにより、必要な部分の精細さを維持しながら粒の数や密度を最適化し、従来のガウシアンスプラッティングによる生成方法と比べて、生成時間を10分の1に短縮した。最短1分ほどで3Dモデルを生成できるという。

また、3Dモデルの生成過程で、現場映像に映り込んだ作業員や一時的な物体などを自動で検出、除去する。除去した部分については、周囲の映像から背景を補完するため、稼働中の現場で撮影した映像からでも、不要な被写体を除いた現場の状態を3Dモデルとして再現できる。

生成した3Dモデルは、一般的なPCやタブレット端末で閲覧可能だ。設備や機材の配置、外観に加え、メーターやボタンなどの細部も確認できるとしている。

NECは同技術により、遠隔地からの設備点検や異常発生時の迅速な判断を支援する。インフラ事業者や建設業におけるデジタルツインの導入促進や、限られた人材の効率的な配置、設備の安全性向上につなげる考えだ。