Benchmarking_past_present_future 基准测试研讨会主页:过去,现在和将来 我们去过哪里,我们要去哪里? 谈论过去比谈论未来要容​​易。 如今,基准从底向上发展(例如带有代码的论文)。 曾经有来自政府的更多自上而下的领导(和行业,系统的情况下,以基准如 )。 展望未来,可能有来自等组织和/或像这样的影响者的更多自上而下的领导者,他们负责IBM在的成功,并且最近写了一篇论文,建议社区应该如何考虑对机器理解进行基准测试()。 随着我们超越英语,诸如阅读理解之类的任务变得更加有趣。 多语种带来了许多挑战,甚至带来了更多机会。 我们邀请了众多演讲嘉宾,他们可以与我们分享第