logo
avatarLog in
中文
移动端AI模型轻量化部署赛道
Track statusgame.2023.open.competition.status.ended
Total Prize¥260,000

赛道介绍special-title-icon

  本赛道为“2024年川渝大学生人工智能大赛暨腾讯开悟人工智能全球公开赛”移动端AI模型轻量化部署赛道,由腾讯开悟平台与vivo共同定制,面向受邀高校及研究所团队。

赛制介绍special-title-icon

赛道奖励special-title-icon


本赛道优胜奖金设置如上。金额单位为人民币(税前)。

除奖金外,参赛团队还可获得以下奖励:

1.完成赛程(成功提交模型并验证通过)即能获得官方参赛证书。

2.优秀的参赛者有机会获得腾讯开悟项目和vivo提供的相关岗位的实习机会。具体细则另行通知。

赛程简介special-title-icon

主要赛程
8月~10月
本赛题基于仿真业务场景,要求参赛团队完成 AI 智能体模型移动端部署解决方案的搭建和优化。重点考察模型可用性和推理性能。
移动端AI模型轻量化部署
智能体数量3
阵容待公布
评估方式对战测试+性能测试+模型校验
算力资源集群算力(平台提供)

赛题简介:本赛题使用王者荣耀3v3长平攻防战地图。除长条状兵线主路,还包含了一个上部野区和下部野区。 地图两端是双方智能体的复活点,复活点前方为阵营所属水晶。水晶可以不断生产己方阵营的小兵,小兵将向对方阵营自动前行,可以沿路攻击对方阵营的防御塔、水晶和英雄。水晶前方为己方防御塔,可以攻击进入范围的对方阵营的英雄和小兵。 野区是打野英雄获得经济收益和经验收益的主要来源,地图上2个阵营的玩家共享整块野区,但部分野区入口有阵营限制。智能体在地图内可随意移动及释放技能。随着时间的推移,智能体会获得金钱和经验,击杀野区怪物、对方小兵、对方英雄或摧毁对方防御塔会获得大量金钱和经验。 成功摧毁对手水晶的团队获得本局胜利。

赛题目标:在指定时间内,完成基线模型的适配改造和端侧部署。在保证部署模型可用性达标的基础上,优化模型在指定 iQOO 移动设备上运行的各项推理性能指标。具体指标详见后文。

评估方式说明:对参赛团队提交的模型(分为对战包和移动端部署包)进行对战测试和性能测试。

● 对战测试: 参赛团队提交的对战包和腾讯开悟平台提供的参考模型进行多轮对战。每轮对战中,双方模型均按测试阵容组合出战,并与对方阵容组合逐一匹配,每种组合换边对战2局。对战完成后,根据提交模型的获胜局数/总对战局数计算对战胜率。

参赛团队提交的对战包和移动端部署包,处理相同测试输入的预测结果应具有一致性(误差小于一定阈值),否则将影响成绩。

● 性能测试:平台对参赛团队提交的移动端部署包进行批量测试,通过多次运行,采集运行结果和性能数据,作为评分依据。

评估指标: 设置模型可用性达标条件,对参赛团队提交的模型进行可用性校验,并计算性能评分。如提交的模型不满足可用性要求,或者对战包与移动端部署包预测结果误差过大,将影响性能评分。

●  可用性达标条件
  ○   基线能力继承:完成对战测试,部署模型与参考模型对战,胜率不低于 40%

  ○   稳定性:完成性能测试,部署模型稳定运行多次,无内存异常,无崩溃

●  移动端推理性能:分别考虑低延迟和高吞吐场景
  ○  根据性能测试中采集的数据,计算综合性能评分

  ○  评分子项(按一定比例加权)

    ■  耗时 —— 部署模型的移动端推理耗时

    ■  体积 —— 部署模型的移动端存储开销

    ■  内存 —— 部署模型运行时的设备内存开销

    ■  功耗 —— 部署模型运行时的设备功耗水平

排名及晋级规则:平台将自动评估各战队提交的最终模型/代码,获得各项得分后平均计算总分,并进行排名。完赛后,平台将对参赛战队提交的材料组织技术评审,如评审通过,上述成绩排名作为移动端AI模型轻量化部署赛道的最终排名。