**超要約:**3Dシーンを高画質にする新技術! 拡散モデル×3DGSで、VRとかデジタルツインがさらにスゴくなるって話✨
✨ ギャル的キラキラポイント ✨ ● 3Dなのに、めっちゃキレイになる!まるでプリクラみたいじゃん?📸 ● 視点(見る角度)が変わっても、破綻(はたん)しないのがエモい💖 ● 新しいビジネスチャンスが盛りだくさん!起業も夢じゃない!?🦄
詳細解説 背景 3Dの世界をキレイにする技術はあったけど、視点がズレると画質が落ちちゃう問題があったの! そこで、3Dの形を保ったまま、もっと高画質にする方法が求められてたんだよね~🤔
方法 2D画像の画質を上げる「拡散モデル」ってのを使うよ! それを3Dのデータ(3D Gaussian Splatting: 3DGS)と組み合わせることで、3Dのまま高画質化に成功✨ 色んな角度から見ても破綻しないのがスゴイ!
続きは「らくらく論文」アプリで
We propose 3D Super Resolution (3DSR), a novel 3D Gaussian-splatting-based super-resolution framework that leverages off-the-shelf diffusion-based 2D super-resolution models. 3DSR encourages 3D consistency across views via the use of an explicit 3D Gaussian-splatting-based scene representation. This makes the proposed 3DSR different from prior work, such as image upsampling or the use of video super-resolution, which either don't consider 3D consistency or aim to incorporate 3D consistency implicitly. Notably, our method enhances visual quality without additional fine-tuning, ensuring spatial coherence within the reconstructed scene. We evaluate 3DSR on MipNeRF360 and LLFF data, demonstrating that it produces high-resolution results that are visually compelling, while maintaining structural consistency in 3D reconstructions.