复赛启动!忆芯第一届国产平台动作识别挑战赛第二轮PK赛
由忆芯科技主办、科大讯飞特别设置的“忆芯科技第一届(2022)国产平台动作识别挑战赛”,自7月29日在A.I.开发者大赛平台正式上线后,受到了全国各高校在校生的欢迎,至9月10日初赛报名截止日期,共收到了2326支参赛队伍报名。
根据初赛最终的比赛成绩,及组委会严格的资质审查,最终十支队伍成功进入复赛阶段,自9月20日起,正式开启激烈的复赛环节!
一
赛 题 内 容
复赛阶段基于国产GPU登临平台,以赛事方提供的视频数据作为训练样本,在赛事方指定的登陆平台上对视频中的动作进行识别推理。
二
复 赛 培 训 方 式
1、组委会建群,在群内会定时定期答疑;
2、提供相关的技术文档给到候选队伍(包括开发流程文档、视频,登临相关开发套件,登临sdk等);
3、导师制,预计配备5名导师辅助复赛队伍进行答疑。
三
作 品 提 交 要 求
复赛选手需要提交测试视频文件对应的txt文件,txt文件的每一行标明帧号和本帧的人物动作label id(格式:帧id ,动作类别id)。
提供无标注测试数据即无动作标签的视频数据,无标注视频数据按照数据来源存放在不同的文件夹中,视频文件采用H.264编码的mp4格式,同时需要在国产GPU登临平台提交模型。
四
复 赛 评 测 标 准
复赛评测标准主要参考三个维度的指标,每个指标根据重要性分配一个权重值,如下表所示:
比赛页面排行榜仅显示准确率指标,效率和算法移植完成度指标在比赛结束后加入计算最终得分。
1
准确率
算法评估指标,算法预测结果采用准确率(accuarcy)进行评价,对于算法预测的结果,严格对比每一帧预测结果与真实标注的要素名和要素内容,若二者完全一致,则记为本帧识别正确。测试集分为AB两部分,准确率得分以测试集B的结果为准。
· 准确率权重占比为0.5,得分计算公式如下:准确率得分=准确率*0.5*100
· 对于一段测试视频计算准确率的方法为:accuracy=本段视频中完全预测正确的要素个数/本段视频的帧数
· 对于多段视频计算准确率的方法为:accuracy=累加每段视频预测的准确率/总的测试视频个数。
2
效率
算法耗时输出,从算法加载到处理完测试数据的总体耗时,最大权重占比为0.3,以效率最高的队伍为基准计算相对耗时输出,权重依次衰减(依次衰减0.03),得分计算公式如下:
效率得分=(当前参赛选手测试效率/所有队伍中效率最高队伍的测试效率)*(0.3-0.03*(n-1))*100。其中n表示按测试时间从小到大排名第n的队伍(1≤ n)。
3
算法移植完成
算法从x86开发平台移植到登临平台,国产GPU登临平台目前支持的推理模式有两种:
1. onnx
2. 登临推理引擎
基于两种推理模式以及开发难易程度,将动作识别复赛分为三个阶段,每个阶段分配一个权重:
参赛队伍完成度得分计算公式:
完成度得分=阶段权重*完成度权重*100,其中完成度权重为0.3。
动作识别大赛复赛主要考核参赛队伍在国产GPU登临平台上的算法移植、部署和应用能力,原则上进入复赛的队伍要在规定时间内完成动作识别算法的移植和部署流程,如果参赛队伍未能在规定时间内完成其中一阶段,则视为复赛成绩不合格。
4
最终得分计算
最高得分为100分,最终得分计算公式为:
最终得分=准确率得分+效率得分+算法移植完成度得分
选手最终排名按照最终得分从高到低依次排序。
五
复 赛 评 选
1、参赛队伍在复赛时间内自行到大赛平台下载复赛使用的训练数据和测试数据,每天限3次提交。
2、参赛选手需在复赛时间10月10日17:00之前提交算法模型,此模型提交后无法再更改,参赛选手需基于该模型在指定硬件平台上进行模型移植量化推理。
3、复赛评审工作由大赛组委会组织专家组进行线上评审。专家将根据参赛作品的完成度、创新性、难度及文档质量等因素评出赛道三甲团队。
4、复赛获奖名单将在大赛网站公示,公示期为3天。参赛队伍如有异议,可在公示期内以实名邮件形式向组委会发出仲裁申请,组委会将以邮件形式正式回复仲裁意见。
六
复 赛 名 单
以下是入围复赛的10支队伍名单:
七
复 赛 时 间
复赛比赛时间:2022年9月20日-10月10日17:00
测试集B发布时间:2022年10月9日17:00
复赛评审时间: 2022年10月10日-2022年10月12日(10月13日12:00公布三甲名单)
持续关注
复赛后的前三甲参赛队伍,
将参加科大讯飞全球1024开发者节巅峰之战,
争夺最后的冠军名额!
13W奖金池花落谁家,
敬请关注更多大赛资讯!
忆芯科技
核心职位火热招聘中
扫描二维码了解更多信息
END
推荐阅读
【忆芯技术分享】Endurance Group Management 在企业级方案中的应用
9-14
9-2
9-1
忆芯科技
北京忆芯科技有限公司成立于2015年底,作为国内较早从事高性能固态硬盘主控芯片研发的企业,致力于成为赋能大数据应用的芯片全球领导者。经过7年的发展,公司已成长为国内领先的高端PCIe SSD主控芯片和成品盘供应商,为各行业的信息化发展提供高质量芯片级底层保障,业务方向覆盖消费级、工业级和企业级,主控芯片及解决方案。
忆芯科技核心成员具有多年研发经验和多项研发成果,拥有从底层算法到芯片设计,再到解决方案设计等多方面的丰富经验。在坚持自主研发基础上,研发的芯片产品拥有260余项自主知识产权,并创新性地将处理器架构首次引入存储领域;现已成功完成4款高端消费级、企业级SSD主控芯片流片,所研发的高性能低功耗NVMe SSD主控已量产出货。公司总部位于北京,在上海、成都、合肥、厦门、深圳分别设有研发中心和客户技术支持中心。