SimpleQA

OpenAI 开源 SimpleQA 新基准，专治大模型“胡言乱语”

OpenAI 开源 SimpleQA 新基准，专治大模型“胡言乱语”

当地时间 30 日，OpenAI 宣布，为了衡量语言模型的准确性，将开源一个名为 SimpleQA 的新基准，可衡量语言模型回答简短的事实寻求（fact-seeking）问题的能力。 AI 领域中的一个开放性难题是如何训练模型生成事实正确的回答。当前的语言模型有时会产生错误输出或未经证实的答案，这一问题被称为“幻觉”。

1

资讯热榜

罗永浩 Jarvis 初创项目“J1 Assistant AI 助理”上线，利用语音与大模型互动类 Mac Mini 大小的个人 AI 超算：英伟达 Project Digits 发布，起价 3000 美元 3 到 5 秒即可同声传译 40 余种语言，时空壶推出 W4 Pro 实时翻译耳机 GPT-4o最自私，Claude更慷慨！DeepMind发布全新「AI道德测试」 Just keep scaling！思维链作者Jason Wei 40分钟讲座剖析LLM扩展范式 OpenAI最大秘密，竟被中国研究者破解？复旦等惊人揭秘o1路线图全网都在扒的DeepSeek团队，是清北应届生撑起一片天奥特曼回应一切：宫斗、马斯克、ChatGPT两周年

标签云