IT之家 4 月 10 日消息，OpenAI 宣布啟動 OpenAI 先鋒計劃（OpenAI Pioneers Program），致力于改善當前 AI 模型的評分方式。該公司認為現有的 AI 基準測試存在缺陷，而該計劃將專注于創建能夠“設定優秀標準”的評估體系。

隨著 AI 技術在各行業的應用加速普及，深入了解并提升其在現實世界中的影響力變得至關重要。OpenAI 在其博客中指出，創建特定領域的評估指標是更好地反映實際應用場景、幫助團隊在實際且高風險環境中評估模型性能的有效途徑之一。

近期，眾包基準測試平臺 LM Arena 與 Meta 的 Maverick 模型引發的爭議凸顯了一個問題：如今，人們很難明確區分不同 AI 模型之間的差異。許多廣泛使用的 AI 基準測試側重于衡量模型在一些晦澀任務上的表現，例如解決博士級別的數學難題。還有一些基準測試容易被操縱，或者與大多數人的偏好不一致。

據IT之家了解，通過先鋒計劃，OpenAI 希望為法律、金融、保險、醫療保健和會計等特定領域創建基準測試。該實驗室表示，在未來幾個月內，將與“多家公司”合作設計定制化的基準測試，并最終將這些基準測試公開，同時提供“行業特定”的評估。

OpenAI 在博客中提到，先鋒計劃的第一批參與者將專注于初創公司，這些公司將幫助奠定該計劃的基礎。他們將從眾多初創公司中挑選出少數幾家，這些公司都在從事高價值、應用廣泛的用例，AI 在其中可以產生實際影響。

參與該計劃的公司還將有機會與 OpenAI 團隊合作，通過強化微調技術改進模型。這種技術可以針對一組特定任務優化模型，從而提升其在特定領域的表現。

然而，一個關鍵問題是 AI 社區是否會接受由 OpenAI 資助創建的基準測試。此前，OpenAI 曾在財務上支持過基準測試工作，并設計了自己的評估方法。但與客戶合作發布 AI 測試可能會被視為在道德上存在爭議。