OpenAI 搭建了開(kāi)源 OpenAI Evals 模型評(píng)估框架。OpenAI Evals 模型評(píng)估框架 （https://github.com/openai/evals）用于創(chuàng)建和運(yùn)行各類評(píng)估準(zhǔn)則（benchmarks），支持用 戶自定義評(píng)估邏輯。目前，OpenAI Evals 與現(xiàn)有的基準(zhǔn)測(cè)試兼容，并可用于跟蹤部署中的 模型性能。未來(lái)，OpenAI 計(jì)劃逐步增加測(cè)試基準(zhǔn)的多樣性，以代表更廣泛的故障模式和更 難的任務(wù)集。

GPT-4 于 2022 年 8 月完成訓(xùn)練，技術(shù)細(xì)節(jié)未完全公布。據(jù) GPT-4 技術(shù)文檔，GPT-4 于 2022 年 8 月完成訓(xùn)練，此后，OpenAI 一直在評(píng)估、對(duì)抗性測(cè)試并迭代和改進(jìn)模型，并提出各種 系統(tǒng)J安全緩解措施。此外，OpenAI 在 GPT-4 文檔中明確提出，考慮到競(jìng)爭(zhēng)格局和大型 模型（如 GPT-4）的安全影響，本文檔沒(méi)有包含有關(guān)架構(gòu)（包括模型大�。�、硬件、訓(xùn)練計(jì) 算、數(shù)據(jù)集構(gòu)造、訓(xùn)練方法或類似內(nèi)容的進(jìn)一步細(xì)節(jié)。文檔明確提供的內(nèi)容包括：1）GPT-4 是一個(gè)基于 transformer 的預(yù)訓(xùn)練模型，用于預(yù)測(cè)文字的下一個(gè) token；2）使用公開(kāi)可用數(shù) 據(jù)（如互聯(lián)網(wǎng)數(shù)據(jù)）和第三方提供商授權(quán)的數(shù)據(jù)；3）使用來(lái)自人類反饋的強(qiáng)化學(xué)習(xí)（RLHF） 對(duì)模型進(jìn)行微調(diào)。