需要建议:处理来自相机的彩色图像;人造人;开放简历;NDK;C++

Question

我想对从安卓设备相机捕获的图像的预览进行一些预处理。

我可以这样描述我的应用程序的外壳：

1.） 爪哇部分。

    // Getting preview from camera.
    public void onPreviewFrame(byte[] arg0, Camera arg1) {
    if (imageFormat == ImageFormat.NV21) {
            frameData = arg0; // private byte[] frameData = null;
        }
    }
    // ...
    // After some code - call native function.
    ImageProcessing(width, height, frameData, output); // private int[] output= null;
    // Setting output to bitmap, etc...
    MyCameraPreview.setImageBitmap(bitmap); // Dislplay, etc...

2.）C++部分。图像处理

extern "C"
jboolean huge_prefix_ImageProcessing(
            JNIEnv* env,
            jobject thiz,
            jint width, 
            jint height,
            jbyteArray frameData,
            jintArray output)
    {
        jbyte* pFrameData = env->GetByteArrayElements(frameData, 0);
        jint* pOutput = env->GetIntArrayElements(output, 0);
        Mat gray(height, width, CV_8UC1, (unsigned char *)pFrameData);
        // Some processing and writing gray to result.
        // ...
        return true;
    }

一切都非常适合灰度图像。但是现在我需要执行RGB图像的处理。有人可以给我一个建议，以正确的方式做这件事吗？我做了几次尝试：

• 在图像处理功能内部将 pFrameData 转换为 rgb 格式（从 nv21 开始）。
• 在函数 onPreviewFrame 中，将 nv21 更改为RGB_565，并在图像容器中进行其他更改。

Answer 1

你试过这样的事情吗？（从您的 JNI 包装器调用）

void convertYUV( int width, int height, jbyteArray yuvArray ) {
     // Get the data from JEnv. 
    signed char *data = JNIEnvInfo::getInstance()->getJNIEnv()->GetByteArrayElements(yuvArray, 0);
     // Convert to Mat object.
     Mat imgbuf(Size(width,height), CV_8UC4, (unsigned char*) data);
     Mat img = imdecode(imgbuf, CV_LOAD_IMAGE_COLOR);
    //
    // Release the JNI data pointer.
    JNIEnvInfo::getInstance()->getJNIEnv()->ReleaseByteArrayElements(yuvArray, (jbyte*) yuvArray, 0);
    // ... do stuff with the Mat ..
}

Mat convertRGB(int width , int height , jintArray rgb8888)
{
    //
    int *rgb;
    int i;
    //
    // Get the data from JEnv. 
    int *data = JNIEnvInfo::getInstance()->getJNIEnv()->GetIntArrayElements(rgb8888, 0);
   //
   // Copy the data.
    for(i = 0; i < width * height; i++ ) {
        rgb[i] = data[i];
   }
   //
   // Convert to mat object.
   Mat imgbuf(Size(width,height), CV_8UC3, rgb);
   Mat img = imdecode(imgbuf, CV_LOAD_IMAGE_COLOR);
   //
   // Release the JNI data pointer.
   JNIEnvInfo::getInstance()->getJNIEnv()->ReleaseIntArrayElements(rgb8888, (jint*) rgb8888, 0);
   return img;
}