用FP8训练大模型有多香？微软：比BF16快64%，省42%内存

作者：机器之心发布时间：2023-11-02

微软 OpenAI 大语言模型

大型语言模型（LLM）具有前所未有的语言理解和生成能力，但是解锁这些高级的能力需要巨大的模型规模和训练计算量。在这种背景下，尤其是当我们关注扩展至 OpenAI 提出的超级智能 (Super Inte...【查看原文】

相关资讯

驱动之家 2024-10-29

安卓旗舰告别8GB内存时代，AI大模型推动手机厂商搞“大内存”

AI大模型

环球网 2024-10-28

近期资讯

台山市华丽彩取得粉末涂料冷却装置专利，有效避免粉料温度不一

金融界2024年12月28日消息，国家知识产权局信息显示，台山市华丽彩五金装饰新材料有限公司取得一项名为“一种粉末涂料制备的冷却装置”的专利，授权公告号CN222210883U，申请日期为2024年1月。

金融界 2024-12-28

海信容声取得冷柜专利，实现冷风高效输出

金融界2024年12月28日消息，国家知识产权局信息显示，海信容声（广东）冷柜有限公司取得一项名为“冷柜”的专利，授权公告号CN222210895U，申请日期为2024年4月。专利摘要显示，本实用新型涉及一种冷柜，属于制冷设备技术领域，冷柜包括：箱体、安装箱、压缩机、蒸发器、回风口、出风侧、冷柜出风口和出风件；其中，箱体的顶部呈开口设置。

金融界 2024-12-28

海信容声（广东）冷柜有限公司取得冷柜专利，能够增强导热效果

金融界2024年12月28日消息，国家知识产权局信息显示，海信容声（广东）冷柜有限公司取得一项名为“冷柜”的专利，授权公告号CN222210896U，申请日期为2024年4月。

金融界 2024-12-28

云米电器取得双桶预热活水式电热水器专利，确保出水温度稳定

金融界2024年12月28日消息，国家知识产权局信息显示，佛山市云米电器科技有限公司取得一项名为“一种双桶预热活水式电热水器”的专利，授权公告号CN222210755U，申请日期为2024年4月。

金融界 2024-12-28

海信取得冷柜专利，实现更优的制冷效果

金融界2024年12月28日消息，国家知识产权局信息显示，海信容声（广东）冷柜有限公司取得一项名为“冷柜”的专利，授权公告号CN222210894U，申请日期为2024年4月。

金融界 2024-12-28

沈阳群贺新能源取得一种自复叠二氧化碳空气源热泵热水机的油气分离装置专利，及时排出分离气体避免再次进入油液

金融界2024年12月28日消息，国家知识产权局信息显示，沈阳群贺新能源科技有限公司取得一项名为“一种自复叠二氧化碳空气源热泵热水机的油气分离装置”的专利，授权公告号CN222210872U，申请日期为2024年3月。

金融界 2024-12-28

海信容声取得冷柜专利，提高制冷设备制冷效果

金融界2024年12月28日消息，国家知识产权局信息显示，海信容声（广东）冷柜有限公司取得一项名为“冷柜”的专利，授权公告号CN222210898U，申请日期为2024年4月。

金融界 2024-12-28

海信容声取得冷柜专利，提高冷柜的制冷效果

金融界2024年12月28日消息，国家知识产权局信息显示，海信容声（广东）冷柜有限公司取得一项名为“冷柜”的专利，授权公告号CN222210897U，申请日期为2024年4月。

金融界 2024-12-28

创维电器取得带有新的门吸结构的半导体冷藏冰箱专利，减小门箱间距提高密封性

金融界2024年12月28日消息，国家知识产权局信息显示，创维电器股份有限公司取得一项名为“一种带有新的门吸结构的半导体冷藏冰箱”的专利，授权公告号CN222210886U，申请日期为2023年12月。

金融界 2024-12-28

贵州大数聚取得循环式水合物蓄冷装置专利，达到高效蓄冷的目的

金融界2024年12月28日消息，国家知识产权局信息显示，贵州大数聚科技有限公司取得一项名为“种循环式水合物蓄冷装置”的专利，授权公告号CN222210884U，申请日期为2024年5月。专利摘要显示，本实用新型提供一种循环式水合物蓄冷装置，涉及水蓄冷技术领域。本实用新型用于解决现有的蓄冷装置需要人工加水，水资源浪费现象严重的技术问题。

金融界 2024-12-28

用FP8训练大模型有多香？微软：比BF16快64%，省42%内存

推荐体验

相关资讯

Stable Diffusion 大模型 ChilloutMix fp16

大模型微调实战（八）-使用INT8/FP4/NF4微调大模型

告别卡顿：iPhone 16系列8GB内存大升级，iOS 18智能体验全面爆发

小米15砍掉8GB内存版本王腾：端侧AI大模型对内存占用更多

安卓旗舰告别8GB内存时代，AI大模型推动手机厂商搞“大内存”

近期资讯

台山市华丽彩取得粉末涂料冷却装置专利，有效避免粉料温度不一

海信容声取得冷柜专利，实现冷风高效输出

海信容声（广东）冷柜有限公司取得冷柜专利，能够增强导热效果

云米电器取得双桶预热活水式电热水器专利，确保出水温度稳定

海信取得冷柜专利，实现更优的制冷效果

沈阳群贺新能源取得一种自复叠二氧化碳空气源热泵热水机的油气分离装置专利，及时排出分离气体避免再次进入油液

海信容声取得冷柜专利，提高制冷设备制冷效果

海信容声取得冷柜专利，提高冷柜的制冷效果

创维电器取得带有新的门吸结构的半导体冷藏冰箱专利，减小门箱间距提高密封性

贵州大数聚取得循环式水合物蓄冷装置专利，达到高效蓄冷的目的

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响