【SIGIR 2019 Tutorials】有效的网络搜索在线评估（Effective Online Evaluation for Web Search）

主题： Effective Online Evaluation for Web Search

摘要： 当今大多数领先的web服务和软件产品的开发通常都是以基于评估的数据驱动决策为指导的，这种决策可以确保在质量和数量上的稳定更新流。大型互联网公司在日常和大规模使用在线评估。在开发周期中使用A/B测试的小公司数量也在增长。Web的全面发展在很大程度上取决于实验平台的质量。在本教程中，我们将概述一些领先的互联网公司日常评估管道的最新方法。 这是该教程的第三版，该教程已在WWW和KDD上发布，这是最受欢迎的教程之一。我们为您呈现一个平衡的方案，既有在线评估领域的学术成就概述，也有Yandex和Facebook的领先研究人员和工程师分享的部分独特工业实践经验。