查看原文
其他

杭州市智能抗疫产品首轮测试 ——AI人体测温系统评估结果公布

AIIA 中国信通院CAICT 2020-09-08
为积极响应工信部发布的《充分发挥人工智能赋能效用 协力抗击新型冠状病毒感染的肺炎疫情倡议书》倡议,确保人工智能抗疫产品的效果和质量,便于相关单位根据实际场景需求选择合适的产品,有效助力地方疫情防控战役。3月份以来,中国人工智能产业发展联盟(以下简称“联盟”)联合杭州市经济和信息化局组织开展了杭州市智能抗疫产品首轮评估测试工作,由中国人工智能产业发展联盟对征集到的参测产品进行了系统评测,现将AI人体测温系统的评估分析结果公布如下。





 参测情况本次AI人体测温系统评估共有4家企业的7个产品参与,评估人员根据AI人体测温系统评估规范,通过材料审查、企业披露和非现场技术测试等方法对参测产品的功能、性能等指标进行了评测。本次参与评测的企业与产品见下表(按拼音顺序排名)。


参评企业

参测产品

杭州国辰机器人科技有限公司

健康精灵HealthCare-01

杭州海康威视数字技术股份有限公司

DS-2TD1217B-6/PA(B)

智能人体测温双光半球

杭州海康威视数字技术股份有限公司

DS-2TD2617B-6/PA(B)

智能人体测温双光筒机

杭州海康威视数字技术股份有限公司

DS-2TD2637B-10/P(B)

智能人体测温双光筒机

杭州数尔安防科技股份有限公司

SOAR1010-TH红外人体测温系统

浙江宇视科技有限公司

ET-B31H-BTM32 智能测温人脸门禁一体机

浙江宇视科技有限公司

TIC400B全自动热成像体温快速筛检系统


结果与分析本次测评的产品主要分为两类,一类是高通量非配合式测温系统,适用于火车站、汽车站、地铁站、飞机场等高通量场景,参评产品共6个;一类是低通量配合式测温系统,适用于社区服务中心、商超、公园等低通量场景,参评产品1个。



a) 高通量非配合式测温系统1、功能评测结果与分析
智能告警和数据管理是AI测温系统区别于传统测温系统的两大重要功能。智能告警功能通常包括设定体温阈值并通过AI智能分析对超过阈值的人员进行抓拍、标记和警报(并对其他高温热源没有误报),警报的方式一般有亮灯、声音、屏幕指示疑似人员中的一种或多种,帮助工作人员快速筛查发热人员位置线索;数据管理功能通常包括大数据的数据存储,数据回溯,数据共享等功能,从端侧采集数据并通过云共享数据,助力统筹管理,从而快速决策。本轮评测测试了参评产品的智能告警和数据管理两项功能。参评的所有产品都具备智能告警功能,并对其他高温热源无误报。参评的所有产品都具备数据存储和导出功能,少部分产品暂时还不具备数据分析和日志记录功能。
2、性能评测结果与分析本次评测测试了产品的测温误差、单路测温吞吐量、人脸抓拍率这三项性能指标。下图(图中系统与上表参评企业排序无对应关系)给出了测温误差、单路测温吞吐量(4分钟内通过180人次)、人脸抓拍率等多个重要性能指标的测试结果。

 

图1  性能测试结果之测温误差 

 

图2  性能测试结果之单路测温吞吐量

 

图3  性能测试结果之人脸抓拍率


总体来看,大部分参评产品在测温误差、单路测温吞吐量和人脸抓拍率方面均有不错的表现,充分发挥了人工智能技术助力疫情防控。在测温误差方面,参评产品的最大绝对误差都不超过0.35℃,可有效保证疫情中人员体温的获取,基本满足政府、机构等对体温信息的分析需求;在单路测温吞吐量方面,4 分钟内单路通过 180 人次, 人流密度近似于高峰期的地铁站和火车站,参测产品能完成的有效测温人数均在150人次以上,大部分产品能达到170人次以上,保障人群安全快速的通行;在人脸抓拍率方面,参评产品抓拍率都在85%以上,部分产品的人脸抓拍率可达95%以上,在人流稀疏的场景能达到更好的使用效果。



b) 低通量配合式测温系统在功能评测方面,参评产品与高通量产品并无区别,具备智能告警和数据管理功能。
在性能评测方面,本次测评测试了测温误差、人脸抓拍率、人脸识别准确率和口罩佩戴检测率。在测温误差方面,参评产品达到了0.3℃的最大绝对误差,满足实际使用需求;在人脸抓拍率方面,配合式的抓拍更容易实现,参评产品达到了100%的抓拍率;在人脸识别准确率方面,技术已经非常成熟,迁移到戴口罩的人脸识别领域也能有不错的效果,参评产品在使用5000张人脸底库的条件下,能达到99%以上的识别准确率,足够满足办公楼等场景的人脸验证需求。
通过本轮AI人体测温系统的评估测试,联盟向各相关企业提出如下建议:一是系统响应延迟时间宜进一步缩短。提高高密度大流量场所测温时的反馈效率,保证一线工作人员更迅速准确地发现体温异常人员。二是系统测温视场宽度宜进一步增加。提高人员密集场所的非配合式测温时的监测效率,保证公共场所的通行效率。三是建议融合更多AI功能。口罩佩戴检测可以约束人们在人员密集处做好戴口罩等防范工作,助力疫情控制;戴口罩的人脸识别可以提供便捷的身份核验,并减少摘口罩带来的感染风险。



下一步工作计划本次评测工作,得到了杭州市经济和信息化局在组织杭州相关企业参评、征集杭州相关产业应用信息等方面的大力支持。未来,联盟将继续与杭州市经济和信息化局开展测评方面的合作,也欢迎各界积极参与,对我们的评测工作提出宝贵意见建议。如有应用或评测需求可与联盟工作人员联系:
刘硕   13426019405   liushuo1@caict.ac.cn余犀   15852922889   yuxi@ngai.ac.cn




校  审 | 陈  力、 珊  珊

编  辑 | 凌  霄


推荐阅读

AIIA发布《人工智能助力新冠疫情防控调研报告》
关于开展疫情期间电信网络诈骗防范治理优秀案例征集活动的通知



点亮在看共渡难关

    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存