研究人员吐槽某 ICLR 2026 论文使用测试集调参

摘要与判断

一篇 ICLR 2026 顶会论文在开源代码后，被研究人员发现其使用了测试集标签来选择参数，从而导致模型效果异常优异。这一违背标准评估协议的“作弊”行为引发了学术界的关注与吐槽，研究人员担忧此类数据泄露和评估不规范的现象在 arXiv 和 GitHub 的开源项目中可能更为泛滥，反映出当前部分学术成果的质量隐患。

Topics

引用和原文

• doing this until i get booed off stage (now imagine what gets launched on arxiv or thrown
• 原文链接

Trace

Raw Item

raw_9fe3bdc2ed7b4bfe

Processed Item

processed_09998d7293334ab1

Source

source_x_suchenzang

Cluster

查看所属簇

LLM Logs

llm_dd456988ae8744ab, llm_5298fb2a7c4b4f20, llm_28c2742e19234948

Coze Loop

9d825d1d21e039b732c10cde7a20de2d