介绍
人工智能 (AI) 和图形处理单元 (GPU) 领域的领先公司 Nvidia 最近推出了一种新的 AI 模型，可以将 2D 视频剪辑转换为详细的 3D 结构。这个新模型的灵感来自著名的雕塑家和画家米开朗基罗，他用大理石块创造出令人惊叹、栩栩如生的视觉效果。
这个新模型基于 Nvidia Research 和约翰霍普金斯大学的一篇论文，该论文已被计算机视觉和模式识别会议 (CVPR) 20231 接受。该论文提供了更多技术细节以及对 Neuralange 性能和局限性的评估。这种新模型称为“Neuralange”。
什么是神经元？
Neuralange 是一种 AI 模型，它使用神经渲染从 2D 视频剪辑重建 3D 场景。神经渲染是一种结合计算机图形学和深度学习来合成逼真的图像和视频的技术。Neuralange 采用即时神经图形基元，这是 Nvidia Instant NeRF 背后的技术，可以捕捉复杂材料（如屋顶瓦、玻璃板和光滑大理石）的更精细细节和纹理。Neuralange 还可以处理重复的纹理图案、均匀的颜色和强烈的颜色变化，这对以前的方法来说是具有挑战性的。
Neuralange 不仅是创意专业人士的有用工具，还是 3D 重建研究的新方法。Neuralange 是首批可以使用神经渲染以高保真度重建大型场景和小型物体的模型之一。
神经语言的主要特点
Neuralange 有几个关键特性使其从其他 3D 重建方法中脱颖而出：
它可以重建大型场景，如建筑物内部和外部，以及小型物体，如雕像和卡车。
它可以保留 2D 视频剪辑的原始光照和阴影效果，使 3D 结构更加逼真和一致。
它可以生成具有复杂细节和纹理的高保真 3D 模型，这些模型可以导入到设计应用程序中进行进一步编辑