CCL2024-Eval | 第二届汉语框架语义解析评测正式开启,诚邀各界专家学者参与
简介
框架语义解析(Frame Semantic Parsing,FSP)是基于框架语义学进行语义分析的任务,其目标是从句中提取框架语义结构,实现对句子中事件或情境的深层理解。框架语义解析对阅读理解、文本摘要、关系抽取等下游任务具有重要意义。
在自然语言中,大部分情况下以词为单位传达含义,但也存在很多词汇意义聚合现象,即组成的短语出现了新的含义。如:“爱买不买”,整个短语表示说话者对另一方是否要购买某物不在乎或不感兴趣。在框架语义分析中,该短语应该作为一个整体激活“情感反应”框架。如果以“爱”、“买”等单个动词作为目标词,激活喜欢、购买等框架,则无法捕捉到其独特的情感色彩。
构式语法主张语言是由固定的、有意义的单位组成,这些单位被称为构式,既可以是简单的词或短语,也可以是复杂的句子或话语。如,“爱买不买”对应的构式是“爱V不V”,是一个表达语义的整体,表示对某行为不在意或无所谓。该构式应该整体作为目标词激起相应的框架。
为了提升框架语义解析能力,进一步实现对语言的深度理解,我们增加了以构式为“目标词”的框架语义解析数据,推出了第二届汉语框架语义解析评测。
任务介绍
3. 论元角色识别(Role Identification):预测论元范围识别任务中论元的语义角色。
本次评测设置了开放和封闭两个赛道,其中开放赛道的参赛队伍可以使用ChatGPT等大模型进行推理,但禁止对其进行微调,且需提交所使用的提示模板;封闭赛道中,参赛模型的参数量将会被限制。
赛程
报名时间
2024年3月22日-5月2日
训练、验证数据及baseline发布
2024年3月22日
测试A数据发布
2024年3月23日
测试A评测截止
2024年5月4日 17:59:59
测试B数据发布
2024年5月6日
测试B最终测试结果
2024年5月8日 17:59:59
公布测试结果
2024年5月15日前
提交中文或英文技术报告
2024年5月25日
中文或英文技术报告反馈
2024年6月5日
正式提交中英文评测论文
2024年6月10日
公布获奖名单
2024年6月15日
评测研讨会
2024年7月25日-7月28日
报名方式
本次评测于3月22日在阿里天池平台开放报名,登录比赛官网,完成个人信息注册,即可报名参赛。
注意事项:
1. 选手可以单人参赛,也可以组队参赛。组队参赛的每个团队不超过5人,每位选手只能加入一支队伍;
2. 选手需确保报名信息准确有效,组委会有权取消不符合条件队伍的参赛资格及奖励;
3. 选手报名、组队变更等操作截止时间为5月2日;
4. 各队伍(包括队长及全体队伍成员)需要在5月2日前在平台完成实名认证,未完成认证的参赛团队将无法进行后续的比赛;
5. 报名成功后搜索钉钉群73770004096,或扫描以下二维码加入评测交流群。
比赛入口:
https://tianchi.aliyun.com/competition/entrance/532179
评测单位
单位:
山西大学
北京大学
南京大学
组织者:
李茹(山西大学)
谭红叶(山西大学)
常宝宝(北京大学)
戴新宇(南京大学)
比赛奖励
本次评测的获奖队伍将获得由中国中文信息学会计算语言学专委会(CIPS-CL)提供的荣誉证书,以及由赞助商提供的2台笔记本电脑和总计4000元现金奖励。
赞助情况
笔记本电脑由百信信息技术有限公司提供赞助;
评测奖金由思腾合力(天津)科技有限公司高教负责人宋肖敏和太原市杰辉科技共同赞助。
欢迎广大同行一起加入到CFN的建设中,推进中文信息处理技术的发展。
#投 稿 通 道#
让你的文字被更多人看到
如何才能让更多的优质内容以更短路径到达读者群体,缩短读者寻找优质内容的成本呢?答案就是:你不认识的人。
总有一些你不认识的人,知道你想知道的东西。PaperWeekly 或许可以成为一座桥梁,促使不同背景、不同方向的学者和学术灵感相互碰撞,迸发出更多的可能性。
PaperWeekly 鼓励高校实验室或个人,在我们的平台上分享各类优质内容,可以是最新论文解读,也可以是学术热点剖析、科研心得或竞赛经验讲解等。我们的目的只有一个,让知识真正流动起来。
📝 稿件基本要求:
• 文章确系个人原创作品,未曾在公开渠道发表,如为其他平台已发表或待发表的文章,请明确标注
• 稿件建议以 markdown 格式撰写,文中配图以附件形式发送,要求图片清晰,无版权问题
• PaperWeekly 尊重原作者署名权,并将为每篇被采纳的原创首发稿件,提供业内具有竞争力稿酬,具体依据文章阅读量和文章质量阶梯制结算
📬 投稿通道:
• 投稿邮箱:[email protected]
• 来稿请备注即时联系方式(微信),以便我们在稿件选用的第一时间联系作者
• 您也可以直接添加小编微信(pwbot02)快速投稿,备注:姓名-投稿
△长按添加PaperWeekly小编
🔍
现在,在「知乎」也能找到我们了
进入知乎首页搜索「PaperWeekly」
点击「关注」订阅我们的专栏吧
微信扫码关注该文公众号作者