10月12日，在2024我国移动全球合作伙伴大会期间，我国移动携手央企及工业各方一起发布大模型评测系统建造的重要效果《通用大模型评测规范》，为工业界遴选优质大模型供给重要参阅是根据。我国移动总经理何飚、副总经理高同庆，电子规范院、我国电信、国家电网、我国石油、我国物流、南方电网、阿里、科大讯飞、智谱等联合编制单位领导到会发布典礼。
大模型评测是助力人工智能赋能职业使用的重要一环。当时很多企业已发动大模型建造，亟需树立配套的通用大模型和职业大模型评测系统。为发挥大模型评测范畴的引领效果，我国移动联合电子规范院及16家要点央企一起展开大模型评测系统建造作业。第一阶段将环绕通用范畴和4个要点职业范畴，从评测规范拟定、评测基地建造、评测试点使用等方面展开作业。
现在，我国移动携手央企及工业各方遵从“保证评测威望、加强业界协同、处理实际问题、坚持敞开情绪”的准则，开始完结通用大模型评测规范拟定，得到职业龙头央企、业界头部公司、闻名高校及科研机构充沛认可，为后续试点评测等作业奠定了坚实基础。
通用大模型评测规范根据“2-4-6”结构。“2”代表两类评测视角，以要点职业实际使用需求为导向，与国标对模型才能有必定的要求拉齐，将评测使命划分为了解和生成两类视角。“4”代表四类评测要素，从评测全生命周期中提取出评测东西、评测数据、评测方法和评测目标四类要害要素，保证评测作业可施行性。“6”代表六大评测维度，考虑大模型使用过程中的中心才能，设定功能性、准确性、可靠性、安全性、交互性和使用性六大维度。该规范广泛吸纳产学研用各方定见，并结合职业特征场景需求，可为通用大模型全面评价供给客观根据，为AI赋能千行百业供给保证。
未来，我国移动将联合职业有突出奉献的公司、业界头部公司、闻名高校和科研机构，深化发掘石油、电力、交通和物流等要点职业使用需求，继续打造并完善通用及职业大模型评测系统，活跃建造大模型评测基地，广泛搜集各中心企业及头部民企热心参加大模型评测，打造落地使用最佳实践，为提高AI+职业新质生产力，保证国产大模型高水平质量的开展，奉献央企力气。
