1、由于公开测试集,所以可以人工作答直接写答案。或者将预测值中拿不准的答案由人工来做。这是个漏洞,获奖队伍是否会由官方进行二次验证?
答疑:会的。对获奖队伍,官方要求提交代码,并邀请答辩。最终的获奖名次将由模型表现及答辩表现相结合决出
2、是否可以使用额外数据集?(用额外数据集做预训练可以对比赛结果造成影响)
答疑:翻译与同传比赛不可以使用额外数据集。场景分类、人体骨骼关键点、图像中文描述可以使用额外的公开数据集,例如ImageNet,私有数据集不允许使用
3、以文本翻译为例,市面上已经存在google、百度、有道等众多翻译机器,如果他们公司掌握核心算法的员工参赛,是不是对其他选手不太公平?
答疑:本次比赛的目的就是希望选手能够挑战目前的state-of-art的算法。此外,本次大赛的语料主要来源于生活场景中的口语对话,与传统意义上的翻译使用的书面用语在表述方式等方面有区别,原有的算法并不一定能完全迁移到新的语料中。因此并不能简单理解为大公司的员工有优势。
4、是否允许公开代码到公共平台,如GitHub?
答疑:可以
5、官方会出个demo吗?
答疑:会
6、无法顺利加入团队(显示密令有误和操作频繁)
答疑:应该是团队密令有误,请注意大小写。提示操作频繁是后台的防范措施,防止用户暴力调用猜测密令随便加入别人的团队
7、人体骨骼关键点检测的测试集上是否会提供人体位置框?
答疑:不会
8、请问官方有的evaluation代码会公布吗?
答疑:会
没有评论:
发表评论