教育机器人Interjoy人脸识别及情绪分析SDK开发平台试验室管理处

1、大型精密仪器设备购置申请论证报告仪器设备名称教育机器人Interjoy人脸识别及情绪分析SDK开发平台和源代码项目名称浙江省重点高校建设智慧教育项目经费项目负责人周跃良填表日期2017年9月11日实验室管理处制填表说明1此表须在学院申购该设备前填写完成，并与申购计划一起上报有关部门。2单价10万元以上仪器设备的申购均需填写此表。单价1040万元的仪器设备由各学院自行组织校内专家论证、评议；单价40万元以上的仪器设备由各学院组织校内外专家（其中必须有校外专家）论证、评议，项目经费、设备管理等部门参与。3此表填写必须使用碳素墨水钢笔或计算机激光打印。4此表一式五份，学院、实验室各一份，交项目经费管

2、理部门一份、实验室管理处二份。设备名称中文教育机器人Interjoy人脸识别及情绪分析SDK开发平台和源代码英文型号规格V2.0申购数量1套现行单价人民币98万美元可供货厂商（中英文）1北京盛开互动科技有限公司23仪器设备主要功能及应用范围用于人脸识别并分析用户情绪状态，可用于教育机器人的人脸识别并分析用户情绪状态等开发。Interjoy人脸识别及情绪分析SDK主要功能：1.开发者提供图片文件或者图片URL或者视频流，进行图片分析，自动判断图片中是否存在人脸并定位出五官位置、进行1：1与1：N比对、分析特定人脸的性别/年龄/是否佩戴眼镜及喜悦/惊讶/愤怒/中性等情绪状态。2.判断图片中是否含有

3、人脸，如有则给出所有人脸区域的坐标位置。3.精确定位人脸区域5个关键点坐标位置，包括眼睛、鼻子、嘴巴。4.计算两张人脸照片的相似度，用于判断属于同一个人的可能性。5.针对一个人脸，在已有的人脸集合中搜索相似的人脸，并给出相似度排序结果。6.分析特定人脸的性别/年龄/是否佩戴眼镜及喜悦/惊讶/愤怒/中性等情绪状态。7.估计人脸的颜值，给出相应的分值。8.记录首次看见人脸和最后一次看见人脸的时间。9.实现人脸的注册、删除及人脸昵称的修改。Interjoy人脸识别及情绪分析SDK接入方式：1.文档说明1) SDK相关头文件与动态库。2) SDK Demo演示程序。3) SDK说明文档说明文档2.使用

4、步骤1) 下载SDK文件包。2) 将DLL文件加载到对应工程目录下，并包含头文件"SKFaceSDK.h"。3) 将资源文件resources下的图片放入对应的路径下。4) 运行代码。3.接口模块/ 人物数据结构定义typedef struct PersonInfochar sName64;/ 称谓 如果为空, 则为未命名用户int LeftEyeX;/ 左眼Xint LeftEyeY;/ 左眼Yint RightEyeX;/ 右眼Xint RightEyeY;/ 右眼Yint FaceRX1;/ 人脸矩形左上点Xint FaceRY1;/ 人脸矩形左上点Yint Face

5、RX2;/ 人脸矩形右上点Xint FaceRY2;/ 人脸矩形右上点Yint FaceRX3;/ 人脸矩形右下点Xint FaceRY3;/ 人脸矩形右下点Yint FaceRX4;/ 人脸矩形左下点Xint FaceRY4;/ 人脸矩形左下点Yint FaceID;/ 用于链接人物记忆数据库索引int iDistance;/ 距离单位cmchar cAge;/ 年龄char cScore;/ 颜值char cGender;/ 性别 0 不清楚 1 女性 2 男性char cGlasses;/ 0 不戴眼镜 1 戴眼镜 char cExpression;/ 人脸表情time_t tFirst

6、Meeting; / 首次见面时间time_t tLastMeeting; / 最后一次见面时间 PersonInfo;/ SKSmartFaceSDK 初始化， 需要输入视频的宽度与高度extern "C" _declspec(dllimport) bool SKSmartFaceInit(int VideoWidth, int VideoHeight);/ SKSmartFaceSDK 资源释放extern "C" _declspec(dllimport) bool SKSmartFaceDestroy();/ 进行人脸识别extern "

7、C" _declspec(dllimport) bool SKSmartFaceOnLineRecognizer(unsigned char* pBuffer, PersonInfo& person);/ 修改人物昵称extern "C" _declspec(dllimport) bool SKSmartFaceSetPersonName(int PersonID, char* Name);/ 删除已经注册的人物extern "C" _declspec(dllimport) bool SKSmartFaceDelPerson(int P

8、ersonID);/ 获得认识的人extern "C" _declspec(dllimport) std:string *SKSmartFaceGetAllPersonInfo();/ 得到当前人脸注册进度0 - 100;extern "C" _declspec(dllimport) int SKSmartFaceGetRegProgress();/ 开始进行人脸注册 返回 0 成功 -1 由于模式处于自动注册失败 -2 已经处于注册中导致失败 -3 数据库已满导致注册失败extern "C" _declspec(dllimport)

9、 int SKSmartFaceStartRegFace(char *name);/ 注册一张人脸, extern "C" _declspec(dllimport) bool SKSmartFaceRegFace();/ 取消人脸注册extern "C" _declspec(dllimport) bool SKSmartFaceBreakRegFace();用房情况地点面积家具配备是否需改建落实情况30121是否已落实使用人员技术情况姓 名职称专管或兼管是否使用过熟练程度是否需培训朱信忠教授专管否是是一、申购理由（包括购置目的、必要性和可共享情况）1购置

10、目的和必要性拟采购的基于深度学习技术的人脸识别及情绪分析SDK，可用于在教育机器人、儿童益智智能设备上实现人脸识别及用户情绪状态分析相关的应用开发。拟采购的相关深度学习算法源码，可协助相关老师与研究生快速开展算法方面的研究。该SDK及源码各项性能指标符合科研工作的要求，在同类产品中具有一定的价格优势，在智能机器人领域应用广泛。2本仪器设备可实现共享的学科 智慧教育、电子信息工程、计算机科学与技术、软件工程、多媒体设计二、调研情况1本校是否有同类设备、数量？如有请说明目前该设备的利用率情况，能否共享？ 否2可供货厂商及相关情况（要求货比三家，内容包括仪器型号、性能、特色、附件情况、基本配置报价、

11、附件价格、初步优惠折扣、售后服务承诺、应用支持等）仪器设备使用效益分析教学实验名称时数组数学生人数总学时数/年科研实验名称时数样品数总时数/年经济效益等其它效益专家论证意见申请采购的“教育机器人Interjoy人脸识别及情绪分析SDK开发平台和源代码”，可用于在教育机器人、儿童益智智能设备上实现人脸识别及用户情绪状态分析相关的应用开发，该平台的相关深度学习算法源码，在智能机器人领域应用广泛，可协助相关老师与研究生快速开展算法方面的研究。以该系统平台和源码为基础，相关老师与研究生可开相关方面的研究。通过2-3年的研究，有望得到国家、省部级项目的支持。同时，通过与相关科研院所、智能产业化公司合作，有望产生较大的市场价值。 欲购置的“教育机器人Interjoy人脸识别及情绪分析SDK开发平台和源代码”符合学科的