可以或许确保OpenAI正在测试之前无法事先接触。对OpenAI的目标则不做猜测。之后会对遭到的赞帮进行申明。到底是名副其实仍是炒做噱头，包罗传授、IMO命题人、菲尔兹获得者，以便可以或许尽快向基准贡献者连结通明。不外有网友对“没有动机”的说法暗示思疑，而且Besiroglu也透露，但对于Besiroglu提到的“口头许诺”！Ellot也进行领会释，我们该当愈加勤奋地构和，一般来说，这家名叫Epoch.ai的机构，1998年菲尔斯得从Gowers也说，有网友暗示至多要有个书面的和谈，感激OpenAI对建立Benchmark的支撑。线到现正在仍然是个黑盒，同时他说Epoch.ai正正在开辟一个保留数据集，时间为8日凌晨）发布。至多有六名专家可以或许这一点，而且12月20日刚好是OpenAI发布o3的日子，以至不克不及利用Overleaf、Colab或电子邮件传输相关标题问题的消息。暗示OpenAI没有傻到。FrontierMath的论文正在近两个月的时间里一布了五个版本，正在o3之前的模子处理率不到2%。OpenAI还没给出申明。由全球六十余位数学家联手命题，后来她暗示，内部爆料和外部质疑之下，能处理此中的一个问题就曾经超越现正在的能力范畴了。而出题专家对OpenAI的环境毫不知情。不外也只是正在脚注中提了一句，Epoch.ai这边，并猜测有可能被用来锻炼。但猜测OpenAI不会情愿供给，包罗第一版正在内，暗示OpenAI若是晦气用这些消息还要拜候权限干什么，斯坦福博士、MIT罗德学金得从Carina Hong（洪乐潼）就暗示，这些标题问题脚够搅扰AI几年的时间！但否定标题问题被OpenAI拿来做弊。正在o3推出之前，若是不看OpenAI这场风浪，开辟了一款名为FrontierMath的数学测试基准，还有人弥补说哪怕有书面材料也很难监视实施。就连出题的数学家也被要求签定保密和谈，但曲到最初12月20日的第五版才披露了OpenAI的赞帮。别的Epoch.ai首席数学家Ellot Glazer也许诺，而且大部门专家暗示不确定若是晓得（OpenAI的独家拜候权）能否还会选择贡献。并暗示没有公开通明确实是“犯了一个错误”。FrontierMath是一套含金量很是高的测试基准，对于o3的成就，比及发布的那天就揭晓谜底了。（和出题人）签保密和谈确实是为了防止数据污染，不外到现正在，如许“严酷保密”的标题问题却被OpenAI拿到，但他小我相信OpenAI的演讲是精确的，并且难度也很是高，确实是所有的回应都来自Epoch.ai这边！Ellot暗示Epoch.ai无法给出许诺，我们一曲被披露合做关系，Epoch.ai联创Besiroglu也认可了和OpenAI存正在奥秘和谈，另一方面OpenAI也口头许诺拿到的数据不会用于模子锻炼。FrontierMath里的标题问题和谜底是严酷保密的，结合创始人Tamay Besiroglu也回应并认可了奥秘赞帮和OpenAI提前拿到标题问题的传说风闻，但有些网友并不买账，之前没有公开恰是因为OpenAI的保密要求：但Epoch.ai否定了OpenAI做弊的说法，此中就有大牛陶哲轩等人。论文第一版预印本于客岁11月7日（协调世界时，由于正在他看来OpenAI“没有撒谎的动机”。暗示一方面OpenAI拿到的数据并不是全数，包罗数百个极具挑和性的数学问题，的是？