当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

力零科技申请用于带电作业的并沟线夹安装工具专利，提升并沟线夹带电作业效率

金融界2024年12月25日消息，国家知识产权局信息显示，武汉力零科技有限公司申请一项名为“一种用于带电作业的并沟线夹安装工具”的专利，公开号CN119171098A，申请日期为2024年9月。

金融界 2024-12-25

“微信送礼”重燃战火，电商格局迎来新变数？

随着春节的临近，微信推出了一项新功能“送礼物”，允许用户在微信小店中互赠商品，这一举措不仅为用户的社交互动增添了新趣味，也可能为电商行业带来新的变数。

新播场 2024-12-25

威胜能源技术取得一种负电源电路专利，成本极低

金融界2024年12月25日消息，国家知识产权局信息显示，威胜能源技术股份有限公司取得一项名为“一种负电源电路”的专利，授权公告号CN222192146U，申请日期为2024年3月。

金融界 2024-12-25

力林科技取得电源转换装置专利，具有高电压需求且具备小体积

金融界2024年12月25日消息，国家知识产权局信息显示，力林科技股份有限公司取得一项名为“电源转换装置”的专利，授权公告号CN222192147U，申请日期为2024年4月。

金融界 2024-12-25

供应链金融在物流平台领域创新发展案例（一）

前面的文章，我们都是分析的纯物流行业的公司。本文的案例聚焦于供应链金融的创新实践，通过物联网技术和数字化，如何实现供应链整体竞争力的提升。

物流小兵说 2024-12-25

10个产品细节剖析，看高手是如何做趣味设计的？

在这个春节，各大产品设计师们用他们的创意和匠心，为我们带来了一场视觉和情感的盛宴。本文精选了10个产品细节案例，揭示了设计师们是如何巧妙地将节日元素融入用户体验中，创造出既有趣又温馨的互动。

姝斐suphie 2024-12-25

从RayBan Meta起头，聊聊智能眼镜

大模型发展成熟之后，现在不少可穿戴设备都开始加入大模型。比如Meta RayBan的智能眼镜。具体表现和使用场景如何？我们看看作者的分析。

等待XR的春天 2024-12-25

上海航天能源取得一种基于本安关联的电源专利，降低产品成本

金融界2024年12月25日消息，国家知识产权局信息显示，上海航天能源股份有限公司取得一项名为“一种基于本安关联的电源”的专利，授权公告号CN222192144U，申请日期为2023年12月。

金融界 2024-12-25

赛博传单，为300多万人的生活托底

在数字化浪潮中，探店达人这一新兴职业正悄然改变着人们的生活和就业格局。本文深入探讨了探店达人如何利用平台经济为300多万人的生活提供新的支撑，以及这一现象背后的社会和经济意义。

降噪NoNoise 2024-12-25

盘点2024年十大营销事件

从品牌与体育明星的合作到游戏IP的传奇，从央视春晚的意外曝光到电影的热议，每一个事件都是营销创新的缩影。本文带你回顾这一年中十大最具影响力的营销事件，让我们一起感受营销的力量。

加薪在这 2024-12-25

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2025 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1