天天看點

英國推出AI評估平台Inspect,可為模型知識/推理能力評分

作者:IT之家

IT之家 5 月 13 日消息,英國人工智能安全研究所(AI Safety Institute)近日推出了一款名為“Inspect”的 AI 模型安全評估平台,該平台采用開源授權方式,向全球 AI 工程師免費開放,允許工程師們評估自家模型性能及安全性。

英國推出AI評估平台Inspect,可為模型知識/推理能力評分

IT之家注意到,這款 Inspect 平台主要由三大主要架構組成,分别為“資料集”、“求解器(Solver)”、“評分器”,可用來評估各款 AI 模型的特定方面能力,包含模型的核心知識儲備量、推理能力與自主能力等,相關架構将根據模型測試結果逐一就各項進行評分;除了内置的一系列測試器外,Inspect 也允許開發者以 Python 外挂其他測試架構。

英國推出AI評估平台Inspect,可為模型知識/推理能力評分

英國 AI 安全研究所所長 Ian Hogarth 聲稱,他們推出 Inspect 平台的原因是“相信開源的力量”,該平台能夠鼓勵更多人作出貢獻,同時還能提高 AI 模型透明度及可重複性,同時降低工程師們的成本。

英國推出AI評估平台Inspect,可為模型知識/推理能力評分

參考

繼續閱讀