如何使用灰度像素值从位图创建字节缓冲区?



我正在尝试在我的安卓应用程序中使用tflite模型。当我必须从位图创建一个字节缓冲区并将其用作模型的输入时,就会出现问题。

问题:位图ARGB_8888(32位(,而我需要(8位(灰度图像。

将位图转换为字节缓冲区的方法:

mImgData = ByteBuffer
.allocateDirect(4 * 28 * 28 * 1);
private void convertBitmapToByteBuffer(Bitmap bitmap) throws NullPointerException {
if (mImgData == null) {
throw new NullPointerException("Error: ByteBuffer not initialized.");
}
mImgData.rewind();
for (int i = 0; i < DIM_IMG_SIZE_WIDTH; i++) {
for (int j = 0; j < DIM_IMG_SIZE_HEIGHT; j++) {
int pixelIntensity = bitmap.getPixel(i, j);
unpackPixel(pixelIntensity, i, j);
Log.d(TAG, String.format("convertBitmapToByteBuffer: %d -> %f", pixelIntensity, convertToGrayScale(pixelIntensity)));
mImgData.putFloat(convertToGrayScale(pixelIntensity));
}
}
}
private float convertToGrayScale(int color) {
return (((color >> 16) & 0xFF) + ((color >> 8) & 0xFF) + (color & 0xFF)) / 3.0f / 255.0f;
}

但是,所有像素值均为 -1 或 -16777216。请注意,这里提到的 unpackPixel 方法不起作用,因为无论如何,所有值都具有相同的 int 值。(下面发布有更改以供参考。

private void unpackPixel(int pixel, int row, int col) {
short red,green,blue;
red = (short) ((pixel >> 16) & 0xFF);
green = (short) ((pixel >> 8) & 0xFF);
blue = (short) ((pixel >> 0) & 0xFF);
}

您可以在像素值上调用Color.red()或绿色/蓝色,它将返回灰色强度。然后只需使用putFloat()将其放入字节缓冲区中即可。此外,使用bitmap.getPixels()获取单个数组中的所有像素值比bitmap.getPixel(i, j)相对较快。以下是我在我的 tflite 模型中加载灰度图像的方法:

private ByteBuffer getByteBuffer(Bitmap bitmap){
int width = bitmap.getWidth();
int height = bitmap.getHeight();
ByteBuffer mImgData = ByteBuffer
.allocateDirect(4 * width * height);
mImgData.order(ByteOrder.nativeOrder());
int[] pixels = new int[width*height];
bitmap.getPixels(pixels, 0, width, 0, 0, width, height);
for (int pixel : pixels) {
mImgData.putFloat((float) Color.red(pixel));
}
return mImgData;
}

如果您需要规范化值,只需除以 255:

float value = (float) Color.red(pixel)/255.0f;
mImgData.putFloat(value);

然后,您可以在解释器中将其用作:

ByteBuffer input = getByteBuffer(bitmap);
tflite.run(input, outputValue);

希望这对将来寻找这个的人有所帮助!

最新更新