編輯丨coisini

推理能力是科學(xué)工作的核心?？茖W(xué)家不僅需要記憶事實(shí)，更要提出假設(shè)、驗(yàn)證修正，并在跨領(lǐng)域間融合思想。隨著人工智能（AI）模型的能力不斷增強(qiáng)，核心問題在于它們?nèi)绾瓮ㄟ^深度推理推動(dòng)科學(xué)研究。

OpenAI 認(rèn)為：隨著模型推理與知識(shí)能力的持續(xù)擴(kuò)展，我們需要更強(qiáng)大的基準(zhǔn)來量化和預(yù)測(cè)模型加速科研的潛力。現(xiàn)有科學(xué)基準(zhǔn)多聚焦選擇題、已達(dá)性能飽和或未以科學(xué)能力為核心評(píng)估維度。

為填補(bǔ)這一空白，OpenAI 推出 FrontierScience：一個(gè)專為評(píng)估專家級(jí)科學(xué)能力構(gòu)建的新基準(zhǔn)。該基準(zhǔn)由物理學(xué)、化學(xué)和生物學(xué)領(lǐng)域的專家編寫驗(yàn)證，包含數(shù)百道兼具難度、原創(chuàng)性與實(shí)質(zhì)意義的題目。

研究論文：https://cdn.openai.com/pdf/2fcd284c-b468-4c21-8ee0-7a783933efcc/frontierscience-paper.pdf

FrontierScience 設(shè)有兩個(gè)賽道：衡量奧林匹克式科學(xué)推理能力的奧賽賽道（FrontierScience-Olympiad），以及評(píng)估真實(shí)世界科研能力的研究賽道（FrontierScience-Research）。在初步評(píng)估中，GPT-5.2 在 FrontierScience - 奧賽賽道（得分 77%）和研究賽道（得分 25%）均領(lǐng)先于其他前沿模型。

FrontierScience 的評(píng)估維度與構(gòu)建方法

完整的 FrontierScience 評(píng)估包含 700 余道文本問題（其中 160 道構(gòu)成黃金標(biāo)準(zhǔn)集），涵蓋物理、化學(xué)和生物學(xué)。

FrontierScience - 奧賽賽道包含 100 道由國際奧賽獎(jiǎng)牌得主設(shè)計(jì)的題目，通過約束性簡答形式評(píng)估科學(xué)推理能力，其理論問題難度不低于國際奧賽競(jìng)賽題。

FrontierScience - 奧賽賽道化學(xué)題目示例

FrontierScience - 奧賽賽道物理題目示例

FrontierScience - 奧賽賽道生物題目示例

FrontierScience - 研究賽道包含 60 項(xiàng)由博士科學(xué)家設(shè)計(jì)的原創(chuàng)研究子任務(wù)，采用 10 分制評(píng)分標(biāo)準(zhǔn)。研究賽道旨在構(gòu)建具有獨(dú)立性、多步驟的研究子任務(wù)，其難度相當(dāng)于博士科學(xué)家在科研中可能遇到的挑戰(zhàn)。

FrontierScience - 研究賽道化學(xué)題目示例

FrontierScience - 研究賽道物理題目示例

FrontierScience - 研究賽道生物題目示例

奧賽題集采用簡答評(píng)分模式：答案以數(shù)字、表達(dá)式或模糊字符串匹配形式呈現(xiàn)，便于驗(yàn)證準(zhǔn)確性。但這種驗(yàn)證方式往往限制了問題的表達(dá)張力與開放程度。針對(duì)研究題集，F(xiàn)rontierScience 引入基于量規(guī)的評(píng)估架構(gòu)以應(yīng)對(duì)開放性任務(wù)。每道題目均配備包含多個(gè)獨(dú)立且可客觀評(píng)估條目的評(píng)分量規(guī)，總分 10 分。該量規(guī)不僅考察最終答案的準(zhǔn)確性，更關(guān)注推理步驟的正確性，從而支持對(duì)模型表現(xiàn)與失誤的細(xì)致分析。若模型獲得至少 7/10 的量規(guī)分值，即判定其解答「正確」。

模型表現(xiàn)

OpenAI 在 FrontierScience 上對(duì)多款前沿模型進(jìn)行了評(píng)估：GPT?5.2、Claude Opus 4.5、Gemini 3 Pro、GPT?4o、OpenAI o4-mini 以及 OpenAI o3。

除 GPT?5.2 采用「極高」推理強(qiáng)度外，其余推理模型均以「高」推理強(qiáng)度運(yùn)行。初步評(píng)估顯示，GPT?5.2 在兩個(gè)測(cè)試集中表現(xiàn)最優(yōu)：奧賽題集得分 77%，研究題集得分 25%，均領(lǐng)先于其他前沿模型。

值得注意的是，Gemini 3 Pro 在奧賽題集上與 GPT?5.2 表現(xiàn)相當(dāng)（得分 76%）。

評(píng)估表明：當(dāng)前模型在解答專家級(jí)問題 —— 尤其是開放式研究型任務(wù) —— 方面已取得顯著進(jìn)展，但仍有提升空間。通過對(duì)錯(cuò)誤案例的分析，OpenAI 發(fā)現(xiàn)前沿模型存在以下問題：推理邏輯與計(jì)算錯(cuò)誤、對(duì)專業(yè)科學(xué)概念理解不足，以及事實(shí)性表述不準(zhǔn)確。

局限性與未來方向

盡管 FrontierScience 在科學(xué)基準(zhǔn)測(cè)試難度上邁進(jìn)了一步，但仍存在諸多局限。例如，該測(cè)試集由問題陳述受限的題目構(gòu)成。

FrontierScience 雖能對(duì)模型在專家級(jí)難題上的推理能力提供更精細(xì)的評(píng)估，但尚不能完整反映實(shí)際科研工作的全貌，尤其是未能覆蓋科學(xué)研究的關(guān)鍵環(huán)節(jié)，例如，模型如何生成真正新穎的假設(shè)、如何處理現(xiàn)實(shí)實(shí)驗(yàn)系統(tǒng)等多模態(tài)信息交互。

展望未來，OpenAI 預(yù)期科學(xué)推理能力的進(jìn)步將來源于兩方面：更強(qiáng)大的通用推理系統(tǒng)，以及對(duì)科學(xué)專項(xiàng)能力的針對(duì)性提升。FrontierScience 等基準(zhǔn)測(cè)試有助于我們洞察當(dāng)前 AI 系統(tǒng)的薄弱環(huán)節(jié)，從而引導(dǎo)開發(fā)者著力打造能在科學(xué)探索中成為可靠伙伴的模型。

參考內(nèi)容：https://openai.com/index/frontierscience/