Tengine 人脸检测 Android Camera版

这篇是第4篇-Tengine 人脸检测 Android版的扩展，我们将用TengineKit，把Android Camera输入的YUV格式的视频流转为一帧帧的Bitmap，然后用上第4篇写的人脸检测，快速的变成一个Android Camera应用。

源码在此处FaceDetector_Android_Camera

TengineKit

TengineKit是一个易于集成的人脸检测和人脸关键点SDK。它可以在各种手机上以非常低的延迟运行。

TengineKit图片处理功能

TengineKit.Image类封装了一系列工具API，帮助开发者快速方便的处理图片相关的功能，具体功能请查阅文档，这里我们将用这个TengineKit.Image里面的API实现Android前置摄像头视频流转为Bitmap（YUV_NV21转RGBA）。

实现

TengineKit的配置和Camera应用的结构都是参考这篇文章

用开源212点人脸关键点实现Android人脸实时打码，内附Github地址

我们拿核心部分讲一下

YUV转Bitmap

previewWidth, previewHeight 是摄像头输入视频流的宽高
outputWidth, outputHeight 是希望输出的宽高
为什么要旋转-90度和镜像翻转？因为我们用的前置摄像头，前置摄像头输出的视频流旋转-90度然镜像反正下，得到的就是我们正常看到的照片

@Override
protected void processImage(byte[] yuv, int previewWidth, int previewHeight, int outputWidth, int outputHeight) {

    if(faceBitmap != null){
        faceBitmap.recycle();
    }
    faceBitmap = com.tenginekit.Face.Image.convertCameraYUVData(
            yuv,
            previewWidth, previewHeight,
            outputWidth, outputHeight,
            - 90,
            true);

    faceInfos =  FaceDetector.detectByBitmap(faceBitmap);

    for(Bitmap bitmap : testFaceBitmaps){
        bitmap.recycle();
    }
    testFaceBitmaps.clear();

    runInBackground(new Runnable() {
        @Override
        public void run() {
            trackingOverlay.postInvalidate();
        }
    });
}

相对于上篇文章，这里给FaceDetector新封装了一个API，可以直接传入Bitmap得到人脸数据。

public static List<FaceInfo> detectByBitmap(Bitmap image){
    return detectByBytes(bitmap2Bytes(image), image.getWidth(), image.getHeight());
}

private static byte[] bitmap2Bytes(Bitmap image) {
    // calculate how many bytes our image consists of
    int bytes = image.getByteCount();
    ByteBuffer buffer = ByteBuffer.allocate(bytes); // Create a new buffer
    image.copyPixelsToBuffer(buffer); // Move the byte data to the buffer
    byte[] temp = buffer.array(); // Get the underlying array containing the
    return temp;
}