比赛流程

流程简介

报名阶段（即日起 ~ 6月30日）

1. 注册CodaLab Competition账号：注册地址
2. 注册CMRC 2019评测，此处填写的是上一步注册好的“账号”，非“email”：注册地址
3. 回到CodaLab Competition，用登记过的账号登陆后，进入到比赛页面，点击Participate，获取提交资格（通常在数小时内审核完毕，审核完毕后会有邮件发送到CodaLab绑定的邮箱）。

系统调整阶段（即日起 ~ 7月31日）

1. 进一步熟悉任务：任务介绍
2. 选手搭建各自的比赛系统：资格赛提交流程

资格赛阶段（8月1日 ~ 8月7日）

1. 官方放出资格集的题面（格式与开发集完全相同，但answers字段为空列表）
2. 选手在已经调整好的系统上进行解码，并上传资格集结果
3. 该阶段结束后，资格集排名前10的队伍进入决赛环节

决赛阶段（8月14日 ~ 8月21日）

1. 进入决赛的队伍需要准备好系统源代码提交到CodaLab Worksheet
2. 提交流程参考：决赛提交流程
3. 评测委员会运行代码，得到最终测试集的结果（占总成绩的80%）

专家评审

评审专家将对模型进行全面评估，给出专家打分（占总成绩的20%），具体细则后续给出。