我正在使用 iPhone 摄像头捕捉实时视频，并将像素缓冲区提供给执行某些对象识别的网络。这是相关代码:(我不会发布设置 AVCaptureSession 的代码 等等，因为这是非常标准的。)

- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection {
    CVPixelBufferRef pixelBuffer = CMSampleBufferGetImageBuffer(sampleBuffer);

    OSType sourcePixelFormat = CVPixelBufferGetPixelFormatType( pixelBuffer );
    int doReverseChannels;
    if ( kCVPixelFormatType_32ARGB == sourcePixelFormat ) {
        doReverseChannels = 1;
    } else if ( kCVPixelFormatType_32BGRA == sourcePixelFormat ) {
        doReverseChannels = 0;
    } else {
        assert(false);
    }

    const int sourceRowBytes = (int)CVPixelBufferGetBytesPerRow( pixelBuffer );
    const int width = (int)CVPixelBufferGetWidth( pixelBuffer );
    const int fullHeight = (int)CVPixelBufferGetHeight( pixelBuffer );
    CVPixelBufferLockBaseAddress( pixelBuffer, 0 );
    unsigned char* sourceBaseAddr = CVPixelBufferGetBaseAddress( pixelBuffer );
    int height;
    unsigned char* sourceStartAddr;
    if (fullHeight <= width) {
        height = fullHeight;
        sourceStartAddr = sourceBaseAddr;
    } else {
        height = width;
        const int marginY = ((fullHeight - width) / 2);
        sourceStartAddr = (sourceBaseAddr + (marginY * sourceRowBytes));
    }
}

然后网络采用sourceStartAddr、width、height、sourceRowBytes & doReverseChannels 作为输入。

我的问题如下:用全白“像素”替换或删除部分图像数据的最简单和/或最有效的方法是什么？是否可以直接覆盖像素缓冲区数据的 e 部分，如果可以，如何覆盖？

我对这个像素缓冲区的工作原理只有非常初步的了解，所以如果我在这里遗漏了一些非常基本的东西，我深表歉意。我在 Stackoverflow 上发现的与我最相关的问题是 this one ，其中 EAGLContext 用于将文本添加到视频帧。虽然这实际上适用于我只需要替换单个图像的目标，但我认为如果应用于每个视频帧，此步骤会降低性能，我想知道是否有另一种方法。如有任何帮助，我们将不胜感激。

最佳答案

这是一种无需使用其他库(如 Core Graphics 或 OpenGL)即可操作 CVPixelBufferRef 的简单方法:

- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection {
    CVPixelBufferRef pixelBuffer = CMSampleBufferGetImageBuffer(sampleBuffer);

    const int kBytesPerPixel = 4;
    CVPixelBufferLockBaseAddress( pixelBuffer, 0 );
    int bufferWidth = (int)CVPixelBufferGetWidth( pixelBuffer );
    int bufferHeight = (int)CVPixelBufferGetHeight( pixelBuffer );
    size_t bytesPerRow = CVPixelBufferGetBytesPerRow( pixelBuffer );
    uint8_t *baseAddress = CVPixelBufferGetBaseAddress( pixelBuffer );

    for ( int row = 0; row < bufferHeight; row++ )
    {
        uint8_t *pixel = baseAddress + row * bytesPerRow;
        for ( int column = 0; column < bufferWidth; column++ )
        {
            if ((row < 100) && (column < 100) {
                pixel[0] = 255; // BGRA, Blue value
                pixel[1] = 255; // Green value
                pixel[2] = 255; // Red value
            }
            pixel += kBytesPerPixel;
        }
    }

    CVPixelBufferUnlockBaseAddress( pixelBuffer, 0 );

    // Do whatever needs to be done with the pixel buffer
}

这会用白色像素覆盖图像中左上角的 100 x 100 像素 block 。

我在这个名为 RosyWriter 的 Apple Developer Example 中找到了这个解决方案.

考虑到事实证明这是多么容易，我在这里没有得到任何答案，这让我有点惊讶。希望这对某人有帮助。

关于ios - 在 iOS 中用白色像素替换部分像素缓冲区，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/36838567/