竞赛圈   > 【公告6.25】AB榜说明

小螺号

java
  • 关注者 9
  • 关注了 1

小螺号

官方 java


本次竞赛AB榜的划分方式和比例:

【1】评分采用AB榜形式,提交文件必须包含测试集中所有用户的预测值。排行榜显示A榜成绩,竞赛结束后2小时切换成B榜单。B榜成绩以选定的两次提交或者默认的最后两次提交的最高分为准,最终比赛成绩以B榜单为准。

【2】此题目的AB榜按时间划分,测试集中前一半时间内注册的用户(游戏用户)构成A榜,约占总测试集的51%,其余的注册用户构成B榜,约占总测试集的49%。


一、什么是A/B榜

A/B榜是为防止过拟合而采用的一种评分策略。

一般来讲,拿到一组数据,将数据分为训练集和测试集,测试集会用于评价参赛选手的得分。A/B榜策略是把测试集分为测试集A和测试集B,如下图:

                              

二、过程

在一个赛题中,参赛者提交“测试集”的所有预测结果(包含A和B),排行榜上仅显示测试集A的成绩,即A榜;在AB榜阶段结束之前,有两种方式决定B榜的提交文件:

方式1、参赛者选择2个之前提交的文件来计算自己在B榜的得分;

方式2、若参赛者没有选择,系统默认选择最新提交的两份文件来计算自己在B榜的得分。


三、备注

1、参赛者如果只选择了一份提交文件,那么系统会额外选择除那次提交以外的最后一次提交作为B榜文件(如果参赛者仅选择了最后一次提交的文件作为B榜文件,那么系统会默认第二新提交的文件为第二份B榜文件)。

2、两份B榜文件以成绩最好的那一份作为最终成绩。

3,若参赛者在A榜环节仅提交一份文件,那么该文件作为唯一的B榜文件。

4,B榜成绩揭晓时间:赛程结束之后两个小时内,B榜成绩公布。B榜成绩将作为AB榜阶段的最终成绩。


四、提交B榜文件的操作流程

(1)打开我的提交。显示如下图:



 (2)选择B榜文件,有且最多只能选择两份文件。

 






3条评论

分享

3条评论
意见反馈
关注微信公众号 关注微信公众号

扫一扫分享给周围朋友