POINTREC：叙事驱动的兴趣点推荐数据集

POINTREC 是兴趣点 (POI) 推荐的测试集合，包括 (i) 一组信息需求，(ii) POI 数据集，以及 (iii) 信息需求和 POI 对的分级相关性评估。此外，我们还包括一个简单基线方法的多个变体的建议。

信息需求
所述infoneeds.json文件包含了一组112种的信息需求，这人工收集，并从雅虎与元数据富集 答案和Reddit。

兴趣点数据集
该poi_dataset/文件夹中包含了我们的兴趣点集合，包括国家（文件夹）和城市（JSON文件）。有关统计信息，请参阅此页面。https://github.com/iai-group/sigir2021-pointrec/blob/master/Statistics.md

相关性评估
该 relevance/assessments.tsv 文件包含通过众包收集的原始意义的评估。对于每个信息需求-POI 对（第 1 列和第 2 列），第 3 列包含由工作人员给出的以空格分隔的相关性评级列表。每对至少有 3 个评分。
对于每个信息需求-POI 对，相关性评级被合并到一个单一的真实标签中。此合并由 relevance/create_qrels.py脚本执行。生成的地面实况文件采用 TREC qrels 格式，为related/qrels.trec。