[android]虹软arcface人脸识别sdk引擎使用总结(代码片段)

keaiilinn keaiilinn     2023-03-16     359

关键词:

虹软开放了人脸识别的SDK引擎(免费的哦),刚好有Android版的,就体验了一波。下面来说说Android版的SDK使用心得:

ArcFace 虹软人脸认知引擎简介

目前开放的版本有人脸比对(1:1)和人脸检索(1:N),根据应用场景可选择
人脸检索分为小型网络(检测100人内),中型网络(1000人内),大型网络(需联系虹软官方)
目前开放的功能有人脸比对,人脸识别,人脸追踪

关于如何使用

在官网下载SDK引擎后集成到你的项目中,然后我在此举例说下其中一个sample:人脸识别
官方sample是这样的:

AFR_FSDKInterface engine = new AFR_FSDKEngine();

    //用来存放提取到的人脸信息, face_1 是注册的人脸,face_2 是要识别的人脸
    AFR_FSDKFace face1 = new AFR_FSDKFace();
    AFR_FSDKFace face2 = new AFR_FSDKFace();

    //初始化人脸识别引擎,使用时请替换申请的 APPID 和 SDKKEY
    AFR_FSDKError error = engine.AFR_FSDK_InitialEngine("APPID", "SDKKEY");
    Log.d("com.arcsoft", "AFR_FSDK_InitialEngine = " + error.getCode());

    //输入的 data 数据为 NV21 格式(如 Camera 里 NV21 格式的 preview 数据);人脸坐标一般使用人脸检测返回的 Rect 传入;人脸角度请按照人脸检测引擎返回的值传入。
    error = engine.AFR_FSDK_ExtractFRFeature(data1, width, height, AFR_FSDKEngine.CP_PAF_NV21, new Rect(210, 178, 478, 446), AFR_FSDKEngine.AFR_FOC_0, face1);
    Log.d("com.arcsoft", "Face=" + face1.getFeatureData()[0]+ "," + face1.getFeatureData()[1] + "," + face1.getFeatureData()[2] + "," + error.getCode());

    error = engine.AFR_FSDK_ExtractFRFeature(data1, width, height, AFR_FSDKEngine.CP_PAF_NV21, new Rect(210, 170, 470, 440), AFR_FSDKEngine.AFR_FOC_0, face2);
    Log.d("com.arcsoft", "Face=" + face2.getFeatureData()[0]+ "," + face2.getFeatureData()[1] + "," + face2.getFeatureData()[2] + "," + error.getCode());

    //score 用于存放人脸对比的相似度值
    AFR_FSDKMatching score = new AFR_FSDKMatching(); error = engine.AFR_FSDK_FacePairMatching(face1, face2, score); Log.d("com.arcsoft", "AFR_FSDK_FacePairMatching=" + error.getCode()); Log.d("com.arcsoft", "Score:" + score.getScore());

    //销毁人脸识别引擎
    error = engine.AFR_FSDK_UninitialEngine();
    Log.d("com.arcsoft", "AFR_FSDK_UninitialEngine : " + error.getCode());

代码中的注释已经解释得很清楚了,这是再说下这个NV21格式的data数据。关于NV21是什么东西,请戳这里
使用场景
人脸识别一种场景可以是实时摄像取景,即可以在相机的预览界面里进行。在Android的Camera里有这样一个回调:

mCamera.setPreviewCallback(new Camera.PreviewCallback() 
            @Override
            public void onPreviewFrame(byte[] data, Camera camera) 
               //这里的data数据就是NV21格式,可以在这里处理人脸检测             
            
        );

注意:Camera里的PictureCallback(),也就是我们拍照的回调,里面也有个data,但是这里的data格式不是NV21的,所以在这里传入的data是不能处理人脸识别的
人脸检测还可以利用已有的图像进行检测,但是注意,Android里对图像处理的接口最常用的是BitMap吧。我们需要把BitMap解码为RGB转为NV21才能检测图像中的人脸。这里提供一种转换工具类,当然大神可以无视这个自己写哈:

public static byte[] getNV21(int inputWidth, int inputHeight, Bitmap scaled) throws Exception 

        int[] argb = new int[inputWidth * inputHeight];

        scaled.getPixels(argb, 0, inputWidth, 0, 0, inputWidth, inputHeight);

        byte[] yuv = new byte[inputWidth * inputHeight * 3 / 2];
        encodeYUV420SP(yuv, argb, inputWidth, inputHeight);
        scaled.recycle();
        return yuv;
    

    public static void encodeYUV420SP(byte[] yuv420sp, int[] argb, int width, int height) throws Exception 
        final int frameSize = width * height;

        int yIndex = 0;
        int uvIndex = frameSize;

        int a, R, G, B, Y, U, V;
        int index = 0;
        for (int j = 0; j < height; j++) 
            for (int i = 0; i < width; i++) 

                a = (argb[index] & 0xff000000) >> 24; // a is not used obviously
                R = (argb[index] & 0xff0000) >> 16;
                G = (argb[index] & 0xff00) >> 8;
                B = (argb[index] & 0xff) >> 0;

                // well known RGB to YUV algorithm
                Y = ((66 * R + 129 * G + 25 * B + 128) >> 8) + 16;
                U = ((-38 * R - 74 * G + 112 * B + 128) >> 8) + 128;
                V = ((112 * R - 94 * G - 18 * B + 128) >> 8) + 128;

                // NV21 has a plane of Y and interleaved planes of VU each sampled by a factor of 2
                //    meaning for every 4 Y pixels there are 1 V and 1 U.  Note the sampling is every other
                //    pixel AND every other scanline.
                yuv420sp[yIndex++] = (byte) ((Y < 0) ? 0 : ((Y > 255) ? 255 : Y));
                if (j % 2 == 0 && index % 2 == 0) 
                    yuv420sp[uvIndex++] = (byte) ((V < 0) ? 0 : ((V > 255) ? 255 : V));
                    yuv420sp[uvIndex++] = (byte) ((U < 0) ? 0 : ((U > 255) ? 255 : U));
                

                index++;
            
        
    

关于实测效果(用的小型网络版本,仅代表个人意见)

人脸检测速度很快,大概几十毫秒就能检测出人脸信息,20多张人脸的图像只有1-2个检测不到。
人脸识别这个功能,在特征值提取上会慢点,大概需要100毫秒以上,不过因为用的是小型网络(人数100以下达到最佳),所以这个速度也是完全可以满足应用的。关于人脸注册方式,可以自行建网或建云,当然采用本地化也是可以的,用数据库和文件等多种方式均可注册人脸。
人脸追踪看了下接口跟人脸检测的接口是完全一样的,没有测试不作评价。

总结

虹软免费开放SDK引擎这点很赞
引擎暂不支持人脸信息特征值合成,只能通过注册多张人脸来解决
这个引擎二次开发的可拓展性是很强的,开发者可以根据自己的应用场景去拓展功能,这样可以保证引擎的纯洁度、可拓展性
又GET到很多干货
还没探索到1:N情况下高效识别的方法,目前遍历数据库人脸信息作比对人数多的话识别速度应该会慢很多,请问有高人指导下如何优化不?
还不行,还得再继续努力

人脸识别算法虹软arcface和dlib对比

...现,开源或免费支持离线的方案也有不少。目前初步考虑虹软ArcFace和Dlib。通过官方的demo和网上的资料,写了个工程,也可以在 查看详情

[android]虹软人脸检测与人脸识别集成分享(代码片段)

目前我们的应用内使用了ArcFace的人脸检测功能,其他的我们并不了解,所以这里就和大家分享一下我们的集成过程和一些使用心得 集成ArcFaceFD的集成过程非常简单在ArcFaceFD的文档上有说明支持的系统为5.0及以上系统,但其... 查看详情

c#实现基于ffmpeg加虹软arcface的人脸识别demo(代码片段)

对开发库的C#封装,屏蔽使用细节,可以快速安全的调用人脸识别相关API。具体见github地址。新增对.NETCore的支持,在Linux(Ubuntu下)测试通过。具体的使用例子和Demo详解,参见博客地址。更新:增加对V1.1两个新功能的支持。关... 查看详情

android集成人脸识别都有哪些好的sdk

...ColorReco基于深度学习的人脸识别算法,可以集成到ARM平台Android/IOS系统,对硬件要求较低,运行稳定,动态实时识别,识别率高。并拥有Android人脸识别算法的全套技术,包括TOP级人脸检测,动态人脸关键点跟踪(五官定位),离... 查看详情

java虹软arcface2.0,javasdk使用-进行人脸检测

虹软产品地址:http://ai.arcsoft.com.cn/product/arcface.html虹软ArcFace功能简介人脸检测人脸跟踪人脸属性检测(性别、年龄)人脸三维角度检测人脸对比示例代码说明,其中图片操作部分用到了javacv,javacv中针对opencv进行了一些封装,... 查看详情

虹软人脸识别活体检测只有android版本的嘛?

现在开放平台单独的活体检测只有安卓版本的刚上线的2.1集成了其他平台的参考技术A准备工作1.进入http://ai.arcsoft.com.cn/product/arcface.html网站,注册账号并登录2.选择需要下载的SDK版本填写下载申请,并提交点击提交后获得APPID和SD... 查看详情

人脸识别sdk虹软的好用吗?

...控,信息更加安全;多平台支持/支持iOS,Windows,Linux,Android,满足开发者的各种环境需求。推荐~~ 第5个回答 2020-07-20是功能很全,安全性比较高的人脸识别SDK了,他们公司近几年专门做这一块,可以离线使用,免费下载。... 查看详情

android基于虹软sdk实现离线人脸识别(代码片段)

一、需求       Android端实现离线人脸识别功能,即对比两张人脸是否是同一个人。二、解决方案       选用虹软人脸识别SDK来实现人脸特征数据比对。三、步骤       1.打开虹软开发者中心 开发者中心       ... 查看详情

人脸识别(基于arcface)(代码片段)

...Y第二步:阅读SDK接入文档https://ai.arcsoft.com.cn/manual/arcface_android_guideV2.html其中重要的是下面Step1:调 查看详情

虹软人脸识别怎么样

...识别吗,看它是免费的,有多个平台版本,我们目前想用android与Windows的,听说其可以离线使用,有使用过的用户分享一下经验我们公司对比测试了几家人脸识别的,其他家都是API借口,虹软的是SDK离线运行的,人脸检测和人脸... 查看详情

虹软人脸识别sdk2.0版本最多可以识别多少张人脸?

...体可以参考开发说明文档。参考技术A人脸库是您将经过虹软人脸认知引擎中的相关算法提取得到的人脸特征进行保存后形成的特征数据库 参考技术B上限是10000,还可以的,精度速度都很快,不过最好的应该是1-50之间 参考技术C... 查看详情

android人脸识别怎么集成sdk?

参考技术A应用写好调用就行了具体的可以看虹软的人脸识别安卓的demo,有很多人分享的 查看详情

想做人脸识别的开发,有没有android的功能全的人脸识别sdk?

想做人脸识别的开发,有没有android的功能全的人脸识别SDK?参考技术A推荐虹软的,他们提供的人脸识别SDK支持Android系统,也支持多开发语言,你可以去官网了解一下,他们的SDK是免费提供的,可以离线使用,在该有的准确率和... 查看详情

android人脸识别sdk有没有离线版的?

参考技术A虹软的吧,他们提供的人脸识别SDK支持Android系统,也支持多开发语言,你可以去官网了解一下,他们的SDK是免费提供的,可以离线使用,在该有的准确率和速度的基础上,安全性也比较高。 参考技术B安卓的SDK离线的... 查看详情

c#usb视频人脸检测

此程序基于虹软人脸识别进行的开发SDK下载地址:https://ai.arcsoft.com.cn/ucenter/user/reg?utm_source=csdn1&utm_medium=referral**前提条件**从虹软官网下载获取ArcFace引擎应用开发包,及其对应的激活码(App_id,SDK_key)将获取到的开发包导入到您... 查看详情

我用过虹软的人脸识别sdk,然后现在想换个设备,想知道虹软的人脸特征码是否所有平台都通用的?

...的。 参考技术B通过人脸识别相同版本提取的人脸特征在Android平台、iOS平台、Windows平台、Linux平台上均可通用。 参考技术C[最佳答案] 我是刚刚申请的虹软的,现在还在测试中,精度还是很高的,其他家还没试过,接下来如果测试... 查看详情

虹软人脸识别sdk(java+linux/window)

虹软官网:http://www.arcsoft.com.cn/登录后要实名认证才可以使用sdk。下图这两个是我选择的,window版本地开发测试,linux版是生产环境使用。1.保存激活码,下载sdk包。2.将动态链接库.dll或.so放在java.libary.path目录(否则执行时会报错)... 查看详情

基于虹软(arcsoft)实现人脸识别——android版(代码片段)

基于虹软实现人脸识别效果图激活引擎第一步配置APP_ID和SDK_KEY第二步:判断是否添加动态链接库(so文件与jar包)第三步:判断是否申明所有权限人脸比对1:N第一步:初始化本地人脸库第二步:初始... 查看详情