Contenu connexe
Similaire à 2004年度863计划 人脸检测识别评测结果报告 公开版_041210
Similaire à 2004年度863计划 人脸检测识别评测结果报告 公开版_041210 (16)
2004年度863计划 人脸检测识别评测结果报告 公开版_041210
- 1. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
人脸检测识别评测结果报告
2004 年 10 月 21 日, 中文与接口技术评测组对参加人脸检测识别的 5 家单位
(System1, System2, System3, System4, System5)的人脸检测,人脸识别,人脸
确认系统进行了测试。之后,根据评测大纲对测试结果进行评判、统计。有关情
况和评测结果报告如下:
一、 评测数据
1. 人脸检测评测共有 2000 幅图像,每幅图像含有单人脸、多人脸和无人脸
等情况。人脸大小从 20*20 像素到 300*300 像素,人脸姿态在平面内旋
转和深度旋转 45 度以内,部分人脸有轻微的光照变化。
2. 人脸识别和确认评测,测试数据分为模板样本库(Gallery) 共 500 幅图像,
和测试样本库(ProbeSet)共 3400 幅图像,Gallery 和 ProbeSet 的规模各为
500 人,其中,模板样本库中每人含有 1 幅标准正面照;测试样本库中,
其中有 100 人,每人含有 14 幅图像,另外 400 人每人含有 5 幅图像。
二、 评测结果
1.人脸检测:
单位简称 System1 System2 System3 System4 System5
正确检测率 86.687% 93.582% 71.639% 91.154% 45.967%
误报指数 81 689 1834 304 1452
平均处理时间(毫秒/幅) 1197.5 2167.5 477.5 1145 1491.5
1
0.8 System1
System2
0.6
System3
0.4
System4
0.2 System5
0
正确检测率 误报指数 系统运行时间
图 1 人脸检测评测中各个系统检测指标的统计(误报指数和系统运行时间均做归一化处理)
- 2. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
2.全自动人脸识别:
单位简称 System1 System3 System4 System5
首选识别率 67.7059% 85.2059% 91.1471% 20.3824%
前十候选识别率 81.7647% 93% 96.2941% 36.8235%
平均识别速度(毫秒/幅) 1831.765 2029.706 1480.588 562.3529
1
0.8
System1
0.6 System3
0.4 System4
System5
0.2
0
首选识别率 前十候选识别率 系统运行时间
图 2 全自动人脸识别评测中各个系统识别指标的统计(系统运行时间做归一化处理)
- 3. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
3.半自动人脸识别:
单位简称 System1 System2 System3 System4 System5
首选识别率 74.3529% 71.6176% 86.5% 91.9118% 40.5588%
前十候选识别率 88.4118% 83.3529% 94.7059% 96.8235% 60.0882%
平均识别速度(毫秒/幅) 815.2941 152.9412 660.5882 610.5882 36.47059
1
0.8 System1
0.6 System2
System3
0.4
System4
0.2 System5
0
首选识别率 前十候选识别率 系统运行时间
图 3 半自动人脸识别评测中各个系统识别指标的统计(系统运行时间做归一化处理)
- 4. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
4.全自动人脸确认:
单位简称 System1 System3 System4 System5
等错误率 ERR 9.38315% 8.0468% 1.48325% 31.1682%
FAR100 90.9412% 92.764% 99.7941% 51%
FAR1000 78.0882% 83.147% 97.9118% 26.3235%
平均识别速度(毫秒/幅) 1811.765 2034.706 1499.118 563.2353
- 7. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
1.2
1
System1
0.8
System3
0.6
System4
0.4
System5
0.2
0
FAR100 FAR1000 等错误率 系统运行时间
图4 全自动人脸确认评测中各个系统识别指标的统计(系统运行时间做归一化处理)
5.半自动人脸确认:
单位简称 System1 System3 System4 System5
等错误率 ERR 6.64315% 7.0652% 1.27105% 24.2973%
FAR100 95.2353% 94.1176% 99.8824% 66.9118%
FAR1000 84.7941% 85% 98.3824% 43.5882%
平均识别速度(毫秒/幅) 851.1765 673.8235 617.6471 61.47059
- 11. 2004 年度 863 计划中文信息处理与智能人机交互技术评测
1
0.8
System1
0.6 System3
0.4 System4
0.2 System5
0
FAR100 FAR1000 等错误率 系统运行时间
图 5 半自动人脸确认评测中各个系统识别指标的统计(系统运行时间做归一化处理)
863 计划中文信息处理与智能人机接口技术评测组
2004 年 12 月 7 日