CVImageBufferRef से स्मृति का स्वामित्व लें

Question

मैं एक साधारण पाइपलाइन बना रहा हूं जो AVCaptureSession से छवियां प्राप्त करता है, उन्हें ओपनसीवी में संसाधित करता है, और फिर उन्हें ओपनजीएल में प्रस्तुत करता है। यह RosyWriter पर आधारित है लेकिन ऑडियो और रिकॉर्डिंग क्षमताओं के बिना। OpenCV प्रसंस्करण लगता है कि

- (void)processPixelBuffer: (CVImageBufferRef)pixelBuffer 
{ 
CVPixelBufferLockBaseAddress(pixelBuffer, 0); 
int bufferWidth = CVPixelBufferGetWidth(pixelBuffer); 
int bufferHeight = CVPixelBufferGetHeight(pixelBuffer); 
unsigned char *pixel = (unsigned char *)CVPixelBufferGetBaseAddress(pixelBuffer); 

cv::Mat image = cv::Mat(bufferWidth,bufferHeight,CV_8UC4,pixel); 
//do any processing 
[self setDisplay_matrix:image]; 
CVPixelBufferUnlockBaseAddress(pixelBuffer, 0); 
} 

इस समारोह में अब तक मैं किसी भी स्मृति कॉपी नहीं की है और मैं इसे इस तरह से रखने के लिए करना चाहते हैं। मुद्दा यह है कि pixelBuffer अभी भी display_image में निहित स्मृति का मालिक हो सकता है। प्रसंस्करण कोड नई मेमोरी आवंटित या नहीं कर सकता है और इसे छवि में संग्रहीत नहीं कर सकता है। यदि प्रसंस्करण ने नई मेमोरी आवंटित नहीं की है तो मुझे डेटा को मिटाने से रोकने के लिए display_matrix के साथ पिक्सेलबफर को पास करना होगा। क्या स्मृति के स्वामित्व को लेने का कोई तरीका है? मैं स्मृति को नष्ट किए बिना पिक्सेलबफर को भी नष्ट करना चाहता हूं।

संबंधित नोट पर, लॉकबेस एड्रेस वास्तव में क्या करता है? अगर मैं एक सीवी :: मैट के आसपास गुजर रहा था, तो CVImageBufferRef जोड़ी मुझे हर बार बेस पता को लॉक करना होगा जब मैं सीवी :: मैट के साथ डेटा को संशोधित/उपयोग करना चाहता हूं?

Answer 1

आप प्रतिलिपि के बिना आधार पता डेटा से डेटा प्रदाता बना सकते हैं, और उसके बाद इस डेटा प्रदाता से UIImage बना सकते हैं। जब आप इस छवि का जिक्र करते हैं तो बफर पुन: उपयोग करने से बचने के लिए आपको नमूना बफर बनाए रखना होगा और बेस पता लॉक करना होगा। वे अनलॉक किया जाना चाहिए और स्वचालित रूप से जारी किया गया है जब आप इस छवि वस्तु भूल जाएगा:

- (void)captureOutput:(AVCaptureOutput *)captureOutput 
didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer 
     fromConnection:(AVCaptureConnection *)connection 
{ 
    // Retain sample buffer and lock base address 
    CFRetain(sampleBuffer); 
    CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer); 
    CVPixelBufferLockBaseAddress(imageBuffer, 0); 

    size_t bytesPerRow = CVPixelBufferGetBytesPerRow(imageBuffer); 
    size_t height = CVPixelBufferGetHeight(imageBuffer); 
    size_t width = CVPixelBufferGetWidth(imageBuffer); 
    void *baseAddress = (void *)CVPixelBufferGetBaseAddressOfPlane(imageBuffer, 0); 

    UIImage *image = imageFromData(baseAddress, width, height, bytesPerRow, sampleBuffer); 

    // Now you can store this UIImage as long as you want 
} 

मैं इस परियोजना https://github.com/k06a/UIImage-DecompressAndMap/blob/master/UIImage%2BDecompressAndMap.m से imageFromData मिल गया है और यह एक छोटा सा अपनाया:

UIImage *imageFromData(void *data, size_t width, size_t height, size_t bytesPerRow, CMSampleBufferRef sampleBuffer) 
{ 
    CGColorSpaceRef colorSpace = CGColorSpaceCreateDeviceRGB(); 
    CGDataProviderRef provider = CGDataProviderCreateWithData((void *)sampleBuffer, data, bytesPerRow * height, munmap_wrapper); 
    CGImageRef inflatedImage = CGImageCreate(width, height, 8, 4*8, bytesPerRow, colorSpace, kCGBitmapByteOrder32Little | kCGImageAlphaPremultipliedFirst, provider, NULL, NO, kCGRenderingIntentDefault); 

    CGColorSpaceRelease(colorSpace); 
    CGDataProviderRelease(provider); 

    UIImage *img = [UIImage imageWithCGImage:inflatedImage scale:scale orientation:UIImageOrientationUp]; 
    CGImageRelease(inflatedImage); 
    return img; 
} 

तुम भी प्रदान करने की आवश्यकता unlock_function:

void unlock_function(void *info, const void *data, size_t size) 
{ 
    // Unlock base address release sample buffer 
    CMSampleBufferRef sampleBuffer = (CMSampleBufferRef)info; 
    CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer); 
    CVPixelBufferUnlockBaseAddress(imageBuffer, 0); 
    CFRelease(sampleBuffer); 
}