初创公司Groq推AI芯片500tokens/秒爆火，贾扬清：Groq成本或是英伟达H100的30倍

作者：钛媒体快报发布时间：2024-02-21

钛媒体App2月21日消息，一家名为Groq的初创公司在AI圈爆火。主要因其自研的LPU芯片在AI推理技术上，通过优化架构和减少内存瓶颈，实现了高效率和低延迟，在处理大模型时的速度远超英伟达GPU，每秒生成速度接近500tokens，而GPT-4仅40tokens。...【查看原文】

相关资讯

英伟达“超级大金矿”！H100 GPU售价是成本的近10倍【附GPU芯片市场发展情况】

随着AI大模型的爆火，英伟达的GPU供不应求，外媒此前表示英伟达的订单迅速增加，乃至已经排到2024年。其中，性能最强的AI训练H100GPU更是成为抢手货，外媒Tomshardware报道，英伟达今年内计划出售超过55万块H100加速卡，不过这种说法还没有被得到英伟达证实。

英伟达 AI大模型

前瞻网 2023-08-18

关注兔英伟达H100至尊版速度提10倍

关注兔靠着满屏的「生成式 AI」，手握一块支撑 ChatGPT 算力、提速 10 倍的 H100 NVLINK 芯片，老黄就差把这几个字写在脸上 ——「我是赢家」。AI 的 iPhone 时刻已经到来，第四次科技革命就要开启，而手握 A100 和 H100 的英伟达，或成最大赢家。在 GTC 大会上，老黄宣布了英伟达在 GPU、加速库、计算光刻、云平台上的亮眼进步，更是放出豪言 —— 英伟达就是要做 AI 圈的台积电！现在已经有人猜测，今天的演讲都是在 H100 上用 AIGC 模型生成的。ChatGPT

ChatGPT AIGC

靛酊嬭翊 2023-03-22

向英伟达发起挑战的Groq是什么来头？简单科普新型AI芯片LPU

在如今的人工智能领域，「GPU is All You Need」已经逐渐成为共识。没有充足的 GPU，连 OpenAI 都不能轻易升级 ChatGPT。

英伟达 OpenAI AI芯片人工智能 ChatGPT

机器之心 2024-03-07

英伟达稳坐AI芯片市场领导地位，A100/H100系列引领风潮

英伟达 AI芯片人工智能

驱动中国 2024-01-31

英伟达H100两大买家变心！要买AMD最新AI芯片

财联社12月7日讯（编辑周子意）Meta、微软和OpenAI公司周三（12月6日）在AMD投资者活动上表态，未来他们将会使用AMD最新的人工智能（AI）芯片Instinct MI300X。图形处理器（GPU）对于创建和部

英伟达微软 OpenAI AI芯片融资

2023-12-07

近期资讯

董事投出弃权票，新华医疗溢价162%收购中帜生物，“死磕”IVD为主业寻增量

钛媒体APP 2024-12-31

致命细胞因子风暴，背后机制公开

陈根谈科技 2024-12-31

076四川舰正式出坞！美国称为“怪物两栖攻击舰”到底有多厉害？

科技老房 2024-12-31

重庆康莱尔取得电镀液循环装置专利，有效防止固体微粒粘附于镀件上造成毛刺

金融界2024年12月31日消息，国家知识产权局信息显示，重庆康莱尔环保科技有限公司取得一项名为“一种电镀液循环装置”的专利，授权公告号CN222226632U，申请日期为2024年4月。

金融界 2024-12-31

启东新智造取得一种电解槽母排连接装置专利，可对不同尺寸母排固定提高实用性

金融界2024年12月31日消息，国家知识产权局信息显示，启东新智造机械设备有限公司取得一项名为“一种电解槽母排连接装置”的专利，授权公告号CN222226598U，申请日期为2024年5月。

金融界 2024-12-31

国外军事博主开始给中国六代机找毛病

黑科技老黄 2024-12-31

深圳市众志坤科技取得一种金属镀镍槽液除杂装置专利，可使较重金属杂质尽可能多留在沉淀槽内

金融界2024年12月31日消息，国家知识产权局信息显示，深圳市众志坤科技有限公司取得一项名为“一种金属镀镍槽液除杂装置”的专利，授权公告号CN222226631U，申请日期为2024年4月。

金融界 2024-12-31

长沙岱勒新材料科技取得带有电磁装置的电镀金刚石线上砂系统专利，提升上砂效果

金融界2024年12月31日消息，国家知识产权局信息显示，长沙岱勒新材料科技股份有限公司取得一项名为“带有电磁装置的电镀金刚石线上砂系统”的专利，授权公告号CN222226618U，申请日期为2024年5月。

金融界 2024-12-31

同建科技取得用于电镀的夹持工装专利，解决现有的夹持工装不能方便对多个工件进行电镀加工的问题

金融界2024年12月31日消息，国家知识产权局信息显示，深圳市同建科技有限公司取得一项名为“一种用于电镀的夹持工装”的专利，授权公告号CN222226624U，申请日期为2024年5月。

金融界 2024-12-31

全国首家全高帧 LED 影院“华夏电影中心”在北京正式落成

IT之家 2024-12-31

初创公司Groq推AI芯片500tokens/秒爆火，贾扬清：Groq成本或是英伟达H100的30倍

推荐体验

相关资讯

英伟达“超级大金矿”！H100 GPU售价是成本的近10倍【附GPU芯片市场发展情况】

关注兔英伟达H100至尊版速度提10倍

向英伟达发起挑战的Groq是什么来头？简单科普新型AI芯片LPU

英伟达稳坐AI芯片市场领导地位，A100/H100系列引领风潮

英伟达H100两大买家变心！要买AMD最新AI芯片

近期资讯

董事投出弃权票，新华医疗溢价162%收购中帜生物，“死磕”IVD为主业寻增量

致命细胞因子风暴，背后机制公开

076四川舰正式出坞！美国称为“怪物两栖攻击舰”到底有多厉害？

重庆康莱尔取得电镀液循环装置专利，有效防止固体微粒粘附于镀件上造成毛刺

启东新智造取得一种电解槽母排连接装置专利，可对不同尺寸母排固定提高实用性

国外军事博主开始给中国六代机找毛病

深圳市众志坤科技取得一种金属镀镍槽液除杂装置专利，可使较重金属杂质尽可能多留在沉淀槽内

长沙岱勒新材料科技取得带有电磁装置的电镀金刚石线上砂系统专利，提升上砂效果

同建科技取得用于电镀的夹持工装专利，解决现有的夹持工装不能方便对多个工件进行电镀加工的问题

全国首家全高帧 LED 影院“华夏电影中心”在北京正式落成

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响