英国推出AI评估平台Inspect可为模型常识/推理能力评分

IT之家把稳到，这款 Inspect 平台紧张由三大紧张框架组成，分别为“数据集”、“求解器（Solver）”、“评分器”，可用来评估各款 AI 模型的特定方面能力，包含模型的核心知识储备量、推理能力与自主能力等，干系框架将根据模型测试结果逐一就各项进行评分；除了内置的一系列测试器外，Inspect 大概可开拓者以 Python 外挂其他测试框架。

英国 AI 安全研究所所长 Ian Hogarth 声称，他们推出 Inspect 平台的缘故原由是“相信开源的力量”，该平台能够鼓励更多人作出贡献，同时还能提高 AI 模型透明度及可重复性，同时降落工程师们的本钱。

参考