【#谷歌# 联手#哈佛大学# 改进NeRF视图合成技术，使图像渲染更真实准确】
近日，哈佛大学和谷歌研究院表示，它们使用改进的新型 Ref-NeRF 模型显著提高了与视图相关的外观质量和场景合成视图中法向量的准确性。
神经辐射场（Neural Radiance Fields，NeRF）是一种视图合成技术，能够将场景由多层感知器（multilayer perceptron，MLP）参数化，呈现出三维场景的逼真图像。很多受它启发的产品被应用到动画、摄影等众多领域。
视图合成属于计算机视觉和图形学领域，即使用观察到的场景图像从新的相机视点渲染图像的任务。在可以密集捕捉场景图像的情况下，简单的光场插值技术可以高保真地呈现新的视图。
然而，在大多数场景下，光场的详尽采样是难以做到的。对于具有光滑表面的场景，一些方法显式地构建虚拟几何图形来解释反射的运动。
NeRF 将场景表示为一个粒子场，阻挡和发射依赖于视图的光。若仔细观察对与视图相关的外观渲染的话，会发现高光部分有光的伪影，并不是以现实合理的方式平滑移动。如下图最右列图片所示。
近日，相关论文获得 2022 年计算机视觉和模式识别会议（CVPR，Conference on Computer Vision and Pattern Recognition）最佳学生论文提名，并已在 2021 年 12 月以《Ref-NeRF: 神经辐射场的结构化视图相关的外观》（Ref-NeRF: Structured View-Dependent Appearance for Neural Radiance Fields）为题提交在 arxiv 上。
研究人员在论文里写道：“NeRF 比较善长解决平滑变化的外观结构，对于光泽表面的外观很难做到真实再现。它容易偏向于用各向同性发射来‘伪造’镜面反射，而不是由表面上的点发出的与视图相关的辐射，从而导致物体表现出半透明或雾状。”
这主要是由于 NeRF 将每个点的输出辐射作为观察方向的函数，不适合插值。因此，NeRF 只能从训练图像中观察到的特定观看方向渲染场景点的外观。
为弥补 NeRF 的不足，研究人员改进了 NeRF 的一个核心组件：与视图相关的外观的表示。这可以使底层函数更简单、更容易插值。
戳链接查看详情：https://t.cn/A6atUIQX
近日，哈佛大学和谷歌研究院表示，它们使用改进的新型 Ref-NeRF 模型显著提高了与视图相关的外观质量和场景合成视图中法向量的准确性。
神经辐射场（Neural Radiance Fields，NeRF）是一种视图合成技术，能够将场景由多层感知器（multilayer perceptron，MLP）参数化，呈现出三维场景的逼真图像。很多受它启发的产品被应用到动画、摄影等众多领域。
视图合成属于计算机视觉和图形学领域，即使用观察到的场景图像从新的相机视点渲染图像的任务。在可以密集捕捉场景图像的情况下，简单的光场插值技术可以高保真地呈现新的视图。
然而，在大多数场景下，光场的详尽采样是难以做到的。对于具有光滑表面的场景，一些方法显式地构建虚拟几何图形来解释反射的运动。
NeRF 将场景表示为一个粒子场，阻挡和发射依赖于视图的光。若仔细观察对与视图相关的外观渲染的话，会发现高光部分有光的伪影，并不是以现实合理的方式平滑移动。如下图最右列图片所示。
近日，相关论文获得 2022 年计算机视觉和模式识别会议（CVPR，Conference on Computer Vision and Pattern Recognition）最佳学生论文提名，并已在 2021 年 12 月以《Ref-NeRF: 神经辐射场的结构化视图相关的外观》（Ref-NeRF: Structured View-Dependent Appearance for Neural Radiance Fields）为题提交在 arxiv 上。
研究人员在论文里写道：“NeRF 比较善长解决平滑变化的外观结构，对于光泽表面的外观很难做到真实再现。它容易偏向于用各向同性发射来‘伪造’镜面反射，而不是由表面上的点发出的与视图相关的辐射，从而导致物体表现出半透明或雾状。”
这主要是由于 NeRF 将每个点的输出辐射作为观察方向的函数，不适合插值。因此，NeRF 只能从训练图像中观察到的特定观看方向渲染场景点的外观。
为弥补 NeRF 的不足，研究人员改进了 NeRF 的一个核心组件：与视图相关的外观的表示。这可以使底层函数更简单、更容易插值。
戳链接查看详情：https://t.cn/A6atUIQX
6月26日上午，三影堂图书馆馆长李子健在@赤子_空间 @巴浪鱼咖啡LocalFishCoffee 进行了主题为“夏日幻想”的图书沙龙。
从最熟悉的夏日风景到童年的生命感悟，各个国家的摄影艺术家从各自的生活体验出发，不断地用照片记录自己的体验。他们或透过镜头观察夏日中的人们，或浪漫或激烈的照片谱写了一篇又一篇关于夏日的诗篇。
非常感谢赤子空间、巴浪鱼咖啡以及泉州的小伙伴们，我们下次分享再见！
从最熟悉的夏日风景到童年的生命感悟，各个国家的摄影艺术家从各自的生活体验出发，不断地用照片记录自己的体验。他们或透过镜头观察夏日中的人们，或浪漫或激烈的照片谱写了一篇又一篇关于夏日的诗篇。
非常感谢赤子空间、巴浪鱼咖啡以及泉州的小伙伴们，我们下次分享再见！
#小编说书#【《自然之声》丛书：中国国家地理杂志社摄影师唐志远观察笔记】这是一套不同寻常的科普图鉴，从自然摄影中了解关于生物微观世界的方方面面。《中国国国家地理》和《博物》御用摄影师——唐志远老师二十年的倾情力作。
《自然之声》丛书系列展现给我们大自然的奇妙，更启发我们自然的博大。本套丛书一共分为《自然之声：虫语》《自然之声：万物生》《自然之声：陆上水中》三部分。这是一套自然摄影师的科学观察笔记。作者用500多幅精美图片以及100多篇自然笔记记录下大自然的声音，同时用幽默生动的文字讲述了惊心动魄的拍摄故事。一草一木，一虫一蝶，万物有灵且美，每个微小的生命都在自己的领域演绎着一场惊心动魄的传奇，读者可以跟着作者的镜头一起探寻隐藏在我们身边的不可思议的自然之美！
《自然之声》丛书系列展现给我们大自然的奇妙，更启发我们自然的博大。本套丛书一共分为《自然之声：虫语》《自然之声：万物生》《自然之声：陆上水中》三部分。这是一套自然摄影师的科学观察笔记。作者用500多幅精美图片以及100多篇自然笔记记录下大自然的声音，同时用幽默生动的文字讲述了惊心动魄的拍摄故事。一草一木，一虫一蝶，万物有灵且美，每个微小的生命都在自己的领域演绎着一场惊心动魄的传奇，读者可以跟着作者的镜头一起探寻隐藏在我们身边的不可思议的自然之美！
✋热门推荐