当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

solidity（基础特性）—学习总结

学习solidity（基本特性） 数组的一些注意事项 返回非固定长度数组使用的修饰符 如果我们在返回时线程的数组我们需要手写一个数组，如果对长度有要求还要设置对应的长度 arr 是一个状态变量，存储在

用户749213471597 2024-12-25

Docker轻量级可视化工具Portainer

参考 https://www.bilibili.com/video/BV1gr4y1U7CY?t=122.6&p=87 官网：https://www.portainer.io/ 使用docker安装P

豆豆豆豆变 2024-12-25

一次搞懂 JS 对象转换，从此告别类型错误！

对象是 JavaScript 中最重要的数据类型之一，掌握它的转换规则，不仅能帮助我们避免常见的类型转换错误，还能使代码更加清晰和高效。

Aphasia311 2024-12-25

Linux shell脚本对常见图片格式批量转换为PDF文件

Linux Debian12基于ImageMagick图像处理工具编写shell脚本用于常见图片png、jpg、jpeg、webp、tiff格式批量转PDF文件，”多个图片分开生成多个PDF文件“或者

星如雨落 2024-12-25

【从零开始】10. RAGChecker 提升回答准确率（番外篇）

本文讲述本人使用 RAGChecker 对 RAG 应用调优的过程，里面还会包含一些关于 RAGChecker 的使用意见，希望对各位有用～

Kida的技术小屋 2024-12-25

Java 线程池深入剖析：核心概念、源码解析与实战应用

线程池是现代多线程编程中的重要工具，它能显著提升任务处理效率并优化系统资源。本文将全面解析 Java 中的线程池机制，帮助开发者深入了解线程池的工作原理、实现方式及其最佳实践。 一、基础概念 1. 什

Java移动技术栈 2024-12-25

理解npm中的包和模块

在 npm 的上下文中，包（package） 和 ****模块（module） 经常被交替使用，我们往往把这两者混为一谈用，但实际上它们有一些细微的区别。 本文就来详细的说下 npm 中包和模块的区别

风度前端 2024-12-25

Shell 脚本编程基础：变量

Shell 脚本编程基础：变量， 定义一个变量时不需要指定类型，直接赋值即可。变量名由字母、数字或下划线组成，但不能以数字开头。

code_abc 2024-12-25

HarmonyOS NEXT 实战之元服务：静态案例效果---每日玩机技巧

背景： 前几篇学习了元服务，后面几期就让我们开发简单的元服务吧，里面丰富的内容大家自己加，本期案例 仅供参考 先上本期效果图 ，里面图片自行替换 效果图1完整代码案例如下： Index ExpertI

JasonYin 2024-12-25

圣诞节：记一次掘友让我感动的时刻

今天有一个大二在美团实习的朋友加我的微信，自述“感觉自己的技术有些停滞，再寻求新的突破方向，在寻找资料的时候，就从google上搜到了您的文章，也想请教一下前辈，目前我是学习了三件套，vue，node

聪小陈 2024-12-25

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2026 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1