LLM真的解决表格问答了吗？全面覆盖复杂应用场景的新一代表格问答测试基准TableBench

文章预览

MLNLP 社区是国内外知名的机器学习与自然语言处理社区，受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。 社区的愿景 是促进国内外自然语言处理，机器学习学术界、产业界和广大爱好者之间的交流和进步，特别是初学者同学们的进步。 转载自 | AINLP LLM真的解决表格问答了吗？ 该工作提出了新一代的表格问答评测基准(TableBench)。TableBench通过涵盖四大类表格问答能力（如事实核查、数值推理、数据分析和可视化），并深入到18个子领域，全面评估了模型在各类复杂表格数据应用场景的能力；该工作还引入了 TableInstruct，这是一个包含 20K 样本的大规模指令语料库，涵盖了三种不同的推理方法，为模型训练提供了丰富的数据支持；此外，该工作还基于开源模型训练了一系列的TableLLMs，促进表格问答社区发展。作者通过TableBench对30多个最新通用 ………………………………