论文标题
repro_eval：python界面，用于以系统为导向的IR实验的可重复性度量
repro_eval: A Python Interface to Reproducibility Measures of System-oriented IR Experiments
论文作者
论文摘要
在这项工作中，我们介绍了Repro_eval-一种用于系统面向系统信息检索（IR）实验的可重复性研究的工具。相应的Python软件包在评估其系统的输出时为IR研究人员提供了不同级别繁殖水平的措施。通过提供易于扩展的界面，我们希望在进行以系统为导向的IR实验的可重复性研究时刺激共同的实践。
In this work we introduce repro_eval - a tool for reactive reproducibility studies of system-oriented information retrieval (IR) experiments. The corresponding Python package provides IR researchers with measures for different levels of reproduction when evaluating their systems' outputs. By offering an easily extensible interface, we hope to stimulate common practices when conducting a reproducibility study of system-oriented IR experiments.
