▼
2024年01月16日,智谱AI正式推出了新一代基座大模型GLM-4,并宣布了一系列产品升级。
基础能力(英文):GLM-4 在 MMLU、GSM8K、MATH、BBH、HellaSwag、HumanEval等数据集上,分别达到GPT-4 94%、95%、91%、99%、90%、100%的水平。
指令跟随能力:GLM-4在IFEval的prompt级别上中、英分别达到GPT-4的88%、85%的水平,在Instruction级别上中、英分别达到GPT-4的90%、89%的水平。
对齐能力:GLM-4在中文对齐能力上整体超过GPT-4。
长文本能力:我们在LongBench(128K)测试集上对多个模型进行评测,GLM-4性能超过 Claude 2.1;在“大海捞针”(128K)实验中,GLM-4的测试结果为 128K以内全绿,做到100%精准召回。
此外,我们在见证了调用量快速增长的同时,还收到了许多宝贵的反馈和建议。针对这些问题,我们也迅速进行了优化,确保了开发者们能够更好地使用GLM-4模型。
GLM-4模型开放API 允许开发者充分调用智谱AI新一代基座大模型GLM-4的强大能力,为大模型赋能千行百业提供强大助力。
我们期待开发者基于GLM-4模型开放API构建各种强大AI应用,推动内地大模型产业生态繁荣发展。
有关GLM-4模型开放API更多内容:https://open.bigmodel.cn/dev/api#glm-4,目前新用户注册登录还有500万Tokens大礼包发放,快来体验吧!
▼