在刚刚结束的Text REtrieval Conference 2005(TREC 2005)国际评测中,我们ITNLP实验室开发的Insun05QA1系统参加了Question Answering (QA) Track中针对main task三类问题:factoid, list 和others所进行的测试。
根据会议揭晓的本次评测结果显示:在全球30家参评单位,71个参评系统中,我们的Insun05QA1系统在factoid问题评测中排名第五(国内参评单位中排名第一),在list问题评测中排名第七(国内参评单位中排名第一),在others问题评测中由于准备不足未能进入前十名,三类问题总成绩综合排名中位列第八(国内参评单位中排名第二)。
此次参评的Insun05QA1系统是ITNLP实验室第一次在英文处理领域开展研究所构建的自动问答系统。通过评测不仅为测试系统性能,正确认识系统表现力提供有力依据,也为系统的进一步完善,确定今后研究方向起到了重要的指导作用。实验室英文QA系统首次参加国际评测,就取得了这样的成绩,充分显示了实验室在语言处理研究方面深厚的积累和强大的实力,增强了我们拓展研究领域的信心。
(赵玉茗 2005 11 27)