“CCL2022-eval-org”的版本间的差异

来自SUDA-HLT
跳到导航 跳到搜索
(建立内容为“ == CCL-2022官网 == [http://www.cips-cl.org/static/CCL2022/cclEval/taskCollection/index.html 官网链接] * 任务征集截止时间:2022年5月10日 *…”的新页面)
 
 
(未显示同一用户的4个中间版本)
第1行: 第1行:
 +
 +
 +
反馈给这些申办单位哪些建议
 +
 +
=== 科研引领性 ===
 +
 +
资源获取
 +
 +
前沿方向
 +
 +
新鲜题目(CCL特色)
 +
 +
第一次发布数据(中文数据)
 +
 +
CCL评测,成为高质量数据集的发布阵地
 +
 +
=== 奖金(赞助费)===
 +
 +
尽量自备赞助费
 +
 +
奖金是必须的吗?
 +
 +
=== 关于测试集/开发集/训练集的划分 ===
 +
 +
一定要有开发集?
 +
 +
不一定有训练集
 +
 +
 +
=== 关于结果提交 ===
 +
 +
* 代码和模型是否提交?(训练 vs. 测试)
 +
 +
* 测试集是否公布(掺入大量无标注数据,防止手动标注、修改)
 +
 +
* 测试集的答案是否公布,将来如何公布?(是否后续有leaderboard)
  
  

2022年4月11日 (一) 07:12的最新版本


反馈给这些申办单位哪些建议

科研引领性

资源获取

前沿方向

新鲜题目(CCL特色)

第一次发布数据(中文数据)

CCL评测,成为高质量数据集的发布阵地

奖金(赞助费)

尽量自备赞助费

奖金是必须的吗?

关于测试集/开发集/训练集的划分

一定要有开发集?

不一定有训练集


关于结果提交

  • 代码和模型是否提交?(训练 vs. 测试)
  • 测试集是否公布(掺入大量无标注数据,防止手动标注、修改)
  • 测试集的答案是否公布,将来如何公布?(是否后续有leaderboard)


CCL-2022官网

官网链接

  • 任务征集截止时间:2022年5月10日
  • 整体评测时间(拟):2022年6月1日—2022年9月31日
  • CCL 2022评测研讨会:2022年10月14日—2022年10月16日