谷歌黑科技，对比下国内小米们玩美颜真是弱爆了

       如果在酒摄会拍客部落谈一张30万像素的照片增强至200万像素，效果居然“很OK”，你会不会嘲笑为难以置信？然而，研究照片增强技术实际上是越来越更接近实际应用层面，现在一起看看谷歌最新的 AI 照片升级技术吧。


      谷歌研究人员在其公司AI博客发表 "使用扩散模型生成高保真图像技术"的文章，该公司的人工智能团队分享他们在图像超分辨率方面取得的新突破。在图像超分辨率中，机器学习模型经过培训，能够将低分辨率照片转化为详细的高分辨率照片。研究人员指出，这AI图像增强技术将从恢复旧照片到改善医学成像等一系列的潜在应用中具有广泛的前景。


      第一种方法称为VRV，或通过重复改进的超级分辨率。以下是技术解释：谷歌写道："SR3是一种超分辨率扩散模型，它以输入低分辨率图像，并利用纯噪声（pure noise）构建相应的高分辨率图像。"该模型是在图像损坏过程中进行训练的，在该过程中，图像信号会逐渐添加到高分辨率图像中，直到仅保留纯图像信息。然后，它学会扭转这个过程，从纯光电信号开始，通过输入低分辨率图像的引导，逐步消除图像放大中噪点以达到目标。





之前（左）和之后（右）用SR3升级。


     谷歌团队说SR3 在提升肖像和自然图像方面效果良好。当用于做8倍的面部图像细节升级。



之前（左）和之后（右）用SR3升级。



之前（左）和之后（右）用SR3升级。


    以下是从低分辨率原作升级的其他肖像：



AI 从低档原作中升级的肖像精选。



AI 从低档原作中升级的肖像精选。


      一旦谷歌看到SR3在增强图像方面有效，就更进一步，采用了第二种方法CDM（class-conditional diffusion model），叫做分级纯净开发机制，一个有定向条件的扩散模型。谷歌称："CDM是一种有条件的扩散模型，在图像数据上分析，让智能机器人得以训练，以生成高分辨率的自然图像。



再进一步增加技术

    谷歌发布了一组示例，显示低分辨率照片在级联中升级。32×32 照片可增强为 64×64，然后增强为 256×256。64×64 照片可以升级为 256×256，然后 1024×1024。





SR3至CDM复合计算生成的最弱图像与原图对比

     正如你所看到的，结果令人印象深刻，最终的照片，尽管有一些错误（如眼镜框的缝隙），但大多数人一眼并不能直接看出如此细微的错误，都误以为相机拍摄的实际原始照片。拍客们还在为自己的相机像素不够困扰吗？


      在小米的雷布斯吹自己的手机打败相机，其它手机还一心一意玩大搞美颜的时候，谁是科技公司？谁更像是生意人，其实不说你也懂得。正如，酒摄会拍客部落针对国内摄影圈的“器材党”不良风气的时候说：如果你是摄影娱乐派，吹吹相机器材没什么不好，但请不要自封老师，教授，更不能自称专业！

这种技术的原理并不复杂，最新版的ps，就有细节增强技术。也是应用类似这样的原理，如果你懂图形成像原理的话，其实不用这样表述，其基础机制就是独立YB一个信号源然后对应RGB信号源的强弱，以YB映射RGB在每个像素中的值进行通道计算。谷歌这个技术牛B的地方不是原理，而是算力。通过架构AI的人脸模型库对像素映射进行极大的数据计算，这里还涉及模糊逻辑数学模型结构。算法和算力，这才是最根本的。

羊城攻摄 发表于 2021-9-2 00:02
这种技术的原理并不复杂，最新版的ps，就有细节增强技术。也是应用类似这样的原理，如果你懂图形成像原理的 ...

不愧是墨老带出的研究生，高人！虽然看不懂，就觉得是牛掰的样子;P

艾米 发表于 2021-9-2 00:06
不愧是墨老带出的研究生，高人！虽然看不懂，就觉得是牛掰的样子

现在玩摄影都要那么高深的学科知识了吗？:dizzy: