OStack程序员社区-中国程序员成长平台

标题: ios - Core Image Kernel Language 的 OpenGL 坐标系 [打印本页]

作者: 菜鸟教程小白    时间: 2022-12-11 17:02
标题: ios - Core Image Kernel Language 的 OpenGL 坐标系

我正在编写一个简单的(至少我认为它会很简单)自定义内核,它获取指定像素和整个图像的差异。 下面是我的代码,这只是过滤器。很适合在 Playground 玩耍。

import UIKit
import CoreImage

let Flower = CIImage( image: UIImage(named: "flower.png")!)!

class Test: CIFilter
{
var inputImage1 : CIImage?
var inputImage2 : CIImage?

var kernel = CIKernel(string:
"kernel vec4 colorRemap(sampler inputIm, sampler GaussIm)      " +
"{                                                             " +
"vec4 size = samplerExtent(inputIm);                           " +
"float row = 1.0;                                              " + 
"float column = 1.0;                                           " + 
"float pixelx = (column - 1.0)/(size.w - 1.0)+1.0/(2.0*size.z);" +
"float pixely = (size.z - row)/(size.z - 1.0)-1.0/(2.0*size.w);" +
"vec3 g0 =sample(GaussIm,vec2(pixelx,pixely)).rgb;             " +
"vec3 current = sample(inputIm,samplerCoord(inputIm)).rgb;     " +
"vec3 diff =(current - g0);                                    " +
"return vec4(diff,1.0);                                        " +
"}                                                             "
)
    var extentFunction: (CGRect, CGRect) -> CGRect =
    { (a: CGRect, b: CGRect) in return CGRectZero }
    override var outputImage: CIImage!
{
    if let inputImage1 = inputImage1,
        inputImage2 = inputImage2,
        kernel = kernel
    {
        let extent = inputImage1.extent
        let arguments = [inputImage1,inputImage2]

        return kernel.applyWithExtent(extent,
                                      roiCallback:
            { (index, rect) in
                return rect

            },
            arguments: arguments)

    }
    return nil
}
}

要使用过滤器,您可以执行以下操作

let filter = Test()
filter.inputImage1 = Flower
filter.inputImage2 = Flower
let output = filter.outputImage

现在,在上面的代码中,我已经指定我们正在获取位于 GaussIm (1,1) 处的像素之间的差异,就好像我们将图像视为一个矩阵(通常意义上的) ,以及 inputIm 的整个图像。

玩过之后,我开始意识到自定义内核语言处理图像有点像 OpenGL。左下角映射到 (0,0),右上角映射到 (1,1),因此像素坐标是 0 到 1 之间的数字。问题是我想指定我想要的任何像素用来取差价。

内核代码的前 5 行试图通过计算图像中每个像素位置的中心来缓解这种情况。考虑到 OpenGL 如何处理它的图像,我不确定这是否正确,或者也许有更好的方法。

如果我在上面运行此代码,则使用下图: Input

我通过 XCode 得到以下信息: OpenGL Output

此外,如果我在 MATLAB 中做同样的事情,我会得到以下输出: MATLAB Output

为什么我得到的输出与在 MATLAB 中不同?它似乎比我从自定义过滤器中得到的要暗一点,但它们同时接近相同的输出。我的想法是它一定是自定义内核在像素之间获取差异的方式,但我不确定发生了什么。



Best Answer-推荐答案


我最终弄明白了——剪辑的原因是由于图像计算方式的性质。这项工作是在 Playground 上完成的,而不是在上下文中,所以显示的任何内容都被裁剪到 [0,1] 的范围内。解决此问题的方法是通过选项确保您正在进行计算的 CIContext 在其计算中支持浮点精度。

关于ios - Core Image Kernel Language 的 OpenGL 坐标系,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38491412/






欢迎光临 OStack程序员社区-中国程序员成长平台 (https://ostack.cn/) Powered by Discuz! X3.4