用业务数据微调 CodeLlama-13b-hf （失败了）

作者：我是王大你是谁发布时间：2024-06-28

通义千问

最近一直做的 txt2sql 的项目，但使用的大模型的是通义千问 api 接口，领导在充了 2000 块之后觉得太贵了，让我开始研究能不能微调下开源 codellama 来替换通义千问，所以才有了下文...【查看原文】

相关资讯

数学能力超ChatGPT 70B开源大模型火了：用AI微调AI

用AI生成的指令微调羊驼大模型，数学能力超ChatGPT——微软最新开源大模型WizardMath来了。如下图所示，经过GSM8k数据集测试，WizardMath数学能力直接击败了ChatGPT、Claude In

ChatGPT Claude 微软

2023-08-14

使用 PyTorch FSDP 微调 Llama 2 70B

## 引言通过本文，你将了解如何使用 PyTorch FSDP 及相关最佳实践微调 Llama 2 70B。在此过程中，我们主要会用到 Hugging Face Transformers、Accel

LLaMA Hugging Face

HuggingFace 2023-12-12

数学能力超ChatGPT，70B开源大模型火了：用AI微调AI，微软全华班出品

GitHub 4.8k星

ChatGPT GitHub 微软

量子位 2023-08-14

OpenAI用13天做出神级机器人：当GPT有了人形

火遍硅谷、OpenAI重金押注的人形机器人Figure01，现在会看会听，能和人类自由对话了。当地时

OpenAI

硅星人 2024-03-14

你还在调戏AI，有的公司已经用ChatGPT开展业务了

ChatGPT

夽谷企业组网 2023-03-10

近期资讯

李想透露自研自动驾驶原因：被供应商欺负惨了

快科技12月25日消息，今日晚间，理想汽车举办“2024理想AI Talk”直播。主持人问道，“听说你们当时被供应商欺负得很惨。”对此，李想回答称，理想的员工经常发出去一个

若风 2024-12-25

老外评年度十佳性感游戏角色：《剑星》伊芙仅第七

哥伦比亚游戏媒体GamerFocus近日发布了2024年“最性感电子游戏十佳角色”评选结果，一起来看一下：10. 《暗喻幻想》霍肯伯格9. 《波斯王子：失落的王冠》萨尔贡8. 《Sorry

2024-12-26

李想：2030年可能做一辆AI超级跑车

快科技12月25日消息，李想在今天的直播中提到了自己买法拉利的话题，他表示体验是很重要的，只有通过体验，来看它到底是怎么做的，经过自己的体验，它才能变成自己的认知和能力。他还表示：&l

建嘉 2024-12-25

229元酷态科10号超级电能棒Plus上架：15000mAh大容量

快科技12月25日消息，酷态科10号超级电能棒Plus目前已经上市，首发229元。10号Plus在外观造型上保持了和10号几乎一个模样，依然是圆柱体，依然是漂亮的一体铝制机身，依然有个小彩屏，拥有150

鹿角 2024-12-25

AGI的终极形态！李想：对“硅基家人”成真无比相信

快科技12月25日消息，在2024理想AI Talk上，李想分享了自己对AGI（通用人工智能）的独到见解。李想认为，如果把人工智能AGI实现到最终阶段，可以分为三个阶段：第一阶段：增强能力。即如同L

随心 2024-12-25

抢到赚翻了！蛇年纪念钞溢价到1000元一套

2025年蛇年贺岁纪念币和纪念钞炒疯了！今天，话题#蛇年纪念钞溢价到1000元一套#等上热搜。报道称，在二手平台上，蛇年纪念币已经溢价到400元一套，高出原价一倍；而纪念钞更是溢价到1000元一套

2024-12-26

1月新机阵容揭晓：小米、华为、iQOO等轮番上阵！

快科技12月25日消息，2024年即将落幕，但手机圈的大戏将在2025年1月份就开始拉开序幕。据博主数码闲聊站爆料， REDMI Turbo 4、iQOO Z9 Turbo长续航版、真我14 Pro+、华为畅享80（待定）多款新

2024-12-26

李想：理想汽车100%会做人形机器人但不是现在

快科技12月25日消息，今日晚间，理想汽车举办了“2024理想AI Talk”直播。直播中，主持人问道，理想汽车会做机器人吗？对此，李想表示，从概率的话是100%，但节奏不是现在，L4自动

若风 2024-12-25

黄子韬称送粉丝10台车：一天涨粉500万评论区全是小米SU7

快科技12月25日消息，日前，艺人黄子韬在抖音直播中立下Flag称：如果粉丝量达到1500万，他就抽粉丝送出10台国产车。此前直播视频中，黄子韬称，网友们全都是敢送就敢要的，有网友在评论区都把

2024-12-26

李想回应购买法拉利还想让理想同学入驻超跑

快科技12月25日消息，上个月，有网友在北京一车管所偶遇了理想汽车创始人李想，当时他正在给自己新购买的法拉利296上牌。这一幕迅速在网络上引起了热议。今晚的2024理想AI Talk上，李想对

随心 2024-12-25

用业务数据微调 CodeLlama-13b-hf （失败了）

推荐体验

相关资讯

数学能力超ChatGPT 70B开源大模型火了：用AI微调AI

使用 PyTorch FSDP 微调 Llama 2 70B

数学能力超ChatGPT，70B开源大模型火了：用AI微调AI，微软全华班出品

OpenAI用13天做出神级机器人：当GPT有了人形

你还在调戏AI，有的公司已经用ChatGPT开展业务了

近期资讯

李想透露自研自动驾驶原因：被供应商欺负惨了

老外评年度十佳性感游戏角色：《剑星》伊芙仅第七

李想：2030年可能做一辆AI超级跑车

229元酷态科10号超级电能棒Plus上架：15000mAh大容量

AGI的终极形态！李想：对“硅基家人”成真无比相信

抢到赚翻了！蛇年纪念钞溢价到1000元一套

1月新机阵容揭晓：小米、华为、iQOO等轮番上阵！

李想：理想汽车100%会做人形机器人但不是现在

黄子韬称送粉丝10台车：一天涨粉500万评论区全是小米SU7

李想回应购买法拉利还想让理想同学入驻超跑

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响