基于Emgu CV+百度人脸识别，实现视频动态 人脸抓取与识别

背景

目前AI 处于风口浪尖，作为 公司的CTO，也作为自己的技术专研，开始了AI之旅，在朋友圈中也咨询 一些大牛对于AI 机器学习框架的看法，目前自己的研究方向主要开源的 AI 库，如：Emgu CV、TensorFlow、CNTK 等等，针对 四大平台 百度AI、阿里ET、腾讯AI、科大讯飞AI 做结合。

PS：笔者的主打语言是C#，目前项目主导系统都是基于Net 系列下开发而成的。主要负责公司软件系统架构设计， 鉴于朋友圈中各位技术大牛无私分享，也是鉴于自己再专研时候遇到不少坑，希望把相关研究心得发出，为大家在coding 中减少 麻烦。稍后会把自己开源框架在博客中建立系列教程，插件化模式 自动服务 （都在实际项目中使用）。

 

选择的理由：四大平台目前 AI 团队算是全世界最牛的一群人，而且资金背景雄厚（AI 很烧钱！），现在四大平台 的AI有一些已经相对成熟，依靠于人家的技术，做自己的应用，应该是中小企业 在物联网行业前进的一个方向吧。

 

四大平台AI入口


1、百度AI https://ai.baidu.com/customer （百度AI 产品：阿波罗无人驾驶开源平台 ）

2、腾讯AI https://ai.qq.com/hr/youtu.shtml（腾讯AI 产品：腾讯觅影）

3、讯飞AI http://startups.xfyun.cn/（讯飞：语音）

4、阿里云ET  https://et.aliyun.com/index（阿里：城市大脑）

 

一、需求

1、目前我们需要通过摄像头 精准的捕获视频监控中人脸（要求精度高）

2、批量捕获人脸进行 人脸识别

3、在人脸矩形框中实时显示人员相关信息

 

二、技术难点

1、百度人脸识别 只是需要通过Image 图片通过开发接口发送，返回识别人物，所以前提还是要先做到人脸在视频中动态捕捉。

2、视频播放需要高效流畅播放，请求接口的效率是否影响视频监控友好展示。

 

三、技术选型

1、为了解决 视频中人脸动态捕捉，选用Emgu CV  是开源 框架 Open CV 的Net 版本，可以人脸精准抓取。

emgu CV 官网：http://www.emgu.com/

 

对于Emgu CV 的详细信息，请百度。

 

2、百度人脸识别，接口完善，人脸识别精准度高，可以很好的做到人脸识别。

百度人脸识别接口文档：http://ai.baidu.com/docs#/Face-Csharp-SDK/top

 

四、技术准备

1、到emgu cv 的官网下载 最新的emgu CV 版本，因为版本间差异较大，所以在百度搜索时候，会发现很多文章代码是无法直接copy的。

2、安装emgu cv 的最版本

请仔细查看 solution 文件夹，里面有对应solution 文件，（在windowDeskTop文件夹里面 ）选择Emgu.CV.sln打开，就可以看到Emgu.CV.Example（Emgu.CV 的Demo）。

3、我们需要将 FaceDetection（人脸精准查找Demo）和VideoSurveilance（视频动态抓捕实现矩形框）两个Demo 做结合

 4、到百度开发者中心注册成为开发者，并且获取开发者。

5、下载百度AI 开发平台 对应的SDK（已经封装过，可以减少开发工作量），或者直接进行Api对接。

 

五、实现

 

先上实现效果，相关个人信息如头像、还有姓名和电话都被我处理过了。

 

 

 

1、准备好摄像头，连接没问题就开始敲代码了。 

2、在百度人脸库建立自己的人脸素材，这个要求要精准，比较适合就是员工的工牌相片，就是一寸或者两寸的照片那种。

详细方法 百度提供SDK 已经有了，就不多作介绍了。其中 自定义的 Uid（用户id，用于唯一码）、group （人才组）、userInfo（用户信息，作为人脸识别返回信息显示）比较关键。

sdk 下载地址：http://ai.baidu.com/sdk，下载完成将如图中 dll 引用到自己的类库中。

 

 

 

以下方法是我简单改造过了。

 我做了一个简单的人脸库添加 工具，可以进行简单人脸库操作

 

 

3、选择VideoSurveilance 做改造，上代码。

 

其中 

void ProcessFrame(object sender, EventArgs e) 方法 是关键，里面就是具体操作人脸识别具体应用。

将 FaceDetection 中的相关内容copy 到VideoSurveilance 项目中，其中 haarcascade_frontalface_default.xml 用于 人脸检测，DetectFace.cs 是具体检测人脸方法。



核心代码介绍

获取人脸矩形框，对应的xml 文件要放在根目录下（winform就是 在bin文件夹中）

DetectFace.Detect(image, "haarcascade_frontalface_default.xml", "haarcascade_eye.xml",             faces, eyes,out detectionTime);
faces 就是返回的 人脸检测内容， foreach (Rectangle face in faces) 对它进行动态获取人脸，在视频中画出来就可以了

// 调用百度人脸识别接口，该方法 SDK 已经有了，我做了一些简单的封装，就是把截取到的矩形头像发送给百度去识别，这个识别是基于自己在百度建立的人脸库
 FaceIdentifyModel MoreIdentifyInfo = FaceAPI.FaceIdentify(rectImage1, tb_Group.Text.Trim(), 1, 1);//人脸识别 一个人的识别效果比较好

 

 

完成上述工作，人脸识别就完成了，测试过，只要人脸库中的素材清晰，识别基本在99% 左右。

相关文章： 

  • Build 2017  | 一文看懂微软 Build 2017 大会：让 AI 走向边缘

  • 认识微软Visual Studio Tools for AI

  • VS Tools for AI全攻略

  • VS Tools for AI全攻略（2）低配置虚拟机也能玩转深度学习，无需NC/NV系列

原文：http://www.cnblogs.com/linbin524/p/linbin524.html

.NET社区新闻，深度好文，欢迎访问公众号文章汇总 http://www.csharpkit.com

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/322666.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Lombok的@Data生成的hashCode和equals方法坑

Lombok的@Data生成的hashCode和equals方法坑

一、场景复现 创建两个lombok的Data注解的类Pig实例，放进HashMap当key，map里面的数据居然被覆盖了。 package com.mk;import lombok.Data; Data public class Pig extends Animal{private String sex; }package com.mk;import java.util.HashMap; impo…
阅读更多...
vscode多行选中

vscode多行选中

shiftalt移动光标，可以连续同时编辑多行内容
阅读更多...
jzoj4671-World Tour【图论,bfs】

jzoj4671-World Tour【图论,bfs】

正题 luogu题目链接:https://www.luogu.org/problemnew/show/CF666B 题目大意 求4个点，使得这4个点按顺序最短路到达的长度最远。 解题思路 用bfsbfsbfs求出每个点之间的最短路，然后对于每个点求出最远点，次远点，反最远点和反次…
阅读更多...
vue-cli2、vue-cli3脚手架详细讲解

vue-cli2、vue-cli3脚手架详细讲解

转载自 vue-cli2、vue-cli3脚手架详细讲解 前言： vue脚手架指的是vue-cli它是vue官方提供的一个快速构建单页面（SPA）环境配置的工具，cli 就是(command-line-interface ) 命令行界面 。vue-cli是基于node环境利用webpack对文件进…
阅读更多...
微软为.NET程序员带来了最优的跨平台开发体验-WSL

微软为.NET程序员带来了最优的跨平台开发体验-WSL

前言 在前几个Visual Studio Code更新中发现有一个重要得特性，就是nodejs可以使用VS Code在WSL中进行Debug了（WSL是指Win10中的Linux子系统）,之前写过一篇文章是使用SSH对Linux环境进行Debug，此时的想法就是如果可以在WSL中直接对…
阅读更多...
article之api文档

article之api文档

查 method:get http://127.0.0.1:8000/article 单条 http://127.0.0.1:8000/article/10 method:get 新增 http://127.0.0.1:8000/article method:post 修改 http://127.0.0.1:8000/article/10 method:put 删除 http://127.0.0.1:8000/article/3 method:delete ## 查询所有数据&…
阅读更多...
jzoj4672-Graph Coloring【图论,模拟】

jzoj4672-Graph Coloring【图论,模拟】

正题 题目大意 一张无向图，每条边有一个颜色(红或蓝)，可以选择点使得连接的边都取反，求至少要选多个点可以使得所有边的颜色相同。 解题思路 不难发现如果确定所有边的颜色，然后知道一个点的选择后就可以知道整个联通图的选择。…
阅读更多...
Redis 性能问题分析

Redis 性能问题分析

转载自 Redis 性能问题分析 在一些网络服务的系统中，Redis 的性能，可能是比 MySQL 等硬盘数据库的性能更重要的课题。比如微博，把热点微博[1]，最新的用户关系，都存储在 Redis 中，大量的查询击中 Redis&am…
阅读更多...
谈谈微服务中的 API 网关（API Gateway）

谈谈微服务中的 API 网关（API Gateway）

前言 又是很久没写博客了，最近一段时间换了新工作，比较忙，所以没有抽出来太多的时间写给关注我的粉丝写一些干货了，就有人问我怎么最近没有更新博客了，在这里给大家抱歉。 那么，在本篇文章中，我…
阅读更多...
laravel如何生成swagger接口文档

laravel如何生成swagger接口文档

php artisan serve --host 0.0.0.0 php artisan serve --port 8080 地址： http://127.0.0.1/blogkjh/public/api/documentation 1、安装包 composer require darkaonline/l5-swagger 2、配置 php artisan vendor:publish --provider “L5Swagger\L5SwaggerService…
阅读更多...
jzoj4673,CF578D-LCS again【统计,字符串,容斥】

jzoj4673,CF578D-LCS again【统计,字符串,容斥】

正题 luoguluoguluogu题目链接:https://www.luogu.org/problemnew/show/CF578D 题目大意 求有多少个字符串TTT使得其和字符串SSS的LCSLCSLCS长度为∣S∣−1|S|-1∣S∣−1 解题思路 首先考虑挖一个空再填一个字母。 这样方案数为n∗n∗mn*n*mn∗n∗m 但是我们考虑aabaabaab这样…
阅读更多...
OAuth2 实现单点登录 SSO

OAuth2 实现单点登录 SSO

转载自 OAuth2 实现单点登录 SSO 1. 前言 技术这东西吧，看别人写的好像很简单似的，到自己去写的时候就各种问题，“一看就会，一做就错”。网上关于实现SSO的文章一大堆，但是当你真的照着写的时候就会发现根本不是那么…
阅读更多...
Ocelot网关

Ocelot网关

Ocelot是一个.net core框架下的网关的开源项目，下图是官方给出的基础实现图，即把后台的多个服务统一到网关处，前端应用：桌面端，web端，app端都只用访问网关即可。 Ocelot的实现原理就是把客户端对网关的请求…
阅读更多...
linux服务器部署laravel出现putenv() has been disabled for security reasons

linux服务器部署laravel出现putenv() has been disabled for security reasons

putenv() has been disabled for security reasons 进入 www/serve/php/72/etc 找到 disable_functions后面的函数，删除 putenv() 如果报错 The Process class relies on proc_open, which is not available on your PHP installation. 删除 proc_open
阅读更多...
欢乐纪中A组周六赛【2019.3.23】

欢乐纪中A组周六赛【2019.3.23】

前言 做A组被虐好惨 成绩 RankRankRank是有算别人的 RankRankRankPersonPersonPersonScoreScoreScoreAAABBBCCC1313132017WYC2017WYC2017WYC1901901909090901001001000001919192017HZB2017HZB2017HZB1101101101001001001010100002727272017XJQ2017XJQ2017XJQ10010010010010010…
阅读更多...
百度OCR文字识别-身份证识别

百度OCR文字识别-身份证识别

简介 答应了园区大牛张善友 要写AI 的系列博客，所以开始了AI 系列之旅。 一、介绍 身份证识别 API 接口文档地址：http://ai.baidu.com/docs#/OCR-API/top 接口描述 用户向服务请求识别身份证，身份证识别包括正面和背面。 请求说明 请求示例…
阅读更多...
Spring Boot Elasticsearch 入门

Spring Boot Elasticsearch 入门

转载自 芋道 Spring Boot Elasticsearch 入门 1. 概述 如果胖友之前有用过 Elasticsearch 的话，可能有过被使用的 Elasticsearch 客户端版本搞死搞活。如果有，那么一起握个抓。所以，我们在文章的开始，先一起理一理这块。 Elas…
阅读更多...
内存不足The following exception is caused by a lack of memory or swap, or not having swap

内存不足The following exception is caused by a lack of memory or swap, or not having swap

在linux执行以下三个命令即可 /bin/dd if/dev/zero of/var/swap.1 bs1M count1024 /sbin/mkswap /var/swap.1 /sbin/swapon /var/swap.1
阅读更多...
P2513-[HAOI2009]逆序对数列【dp,前缀和】

P2513-[HAOI2009]逆序对数列【dp,前缀和】

正题 题目链接:https://www.luogu.org/problemnew/show/P2513 题目大意 求长度为nnn逆序对为kkk个的序列总数。 解题思路 设fi,jf_{i,j}fi,j​表示1∼i1\sim i1∼i的排列逆序对个数为jjj 然后显然:fi,j∑k1i−1fi−1,j−kf_{i,j}\sum_{k1}^{i-1}f_{i-1,j-k}fi,j​k1∑i−1​…
阅读更多...
在.NET Core类库中使用EF Core迁移数据库到SQL Server

在.NET Core类库中使用EF Core迁移数据库到SQL Server

前言 如果大家刚使用EntityFramework Core作为ORM框架的话，想必都会遇到数据库迁移的一些问题。 起初我是在ASP.NET Core的Web项目中进行的，但后来发现放在此处并不是很合理，一些关于数据库的迁移，比如新增表，字段&…
阅读更多...
最新文章

Copyright @ 2022~2023