机器之心报道 编辑:小舟、泽南 用微调的方法,现在羊驼模型也可以打 ChatGPT 了,这不是随便说说,有测试结果为证。 最近,来自华盛顿大学的 QLoRA 成为了 AI 领域的热门,很多人把它形容为...【查看原文】
机器之心报道 编辑:小舟、泽南 「原驼」大模型输出的内容和 ChatGPT 比,人类也无法区分谁好谁坏。 用微调的方法,现在羊驼模型也可以打 ChatGPT 了,这不是随便说说,有测试结果为证。
ChatGPT
机器之心 2023-05-26
这是开源大模型最新成果,来自羊驼家族的又一重磅成员——华盛顿大学原驼(Guanaco)。更关键的是,与原驼一起提出的新方法QLoRA把微调大模型的显存需求从>780GB降低到<48GB。开源社区直接开始狂欢,相关论文成为24小时内关注度最高的AI论文。
量子位 2023-05-25
自动测试分数达到ChatGPT的99.3%,人类难以分辨两者的回答……这是开源大模型最新成果,来自羊驼家族的又一重磅成员——华盛顿大学原驼(Guanaco)。更关键的是,与原驼一起提出的新方法QLoRA把微调大模型的显存需求从>780GB降低到。开源社区直接开始狂欢,相关论文成为24小时内关注度最高的AI论文。以Meta的美洲驼LLaMA为基础,得到原驼650亿参数版只需要48GB显存单卡微调24小时,330亿参数版只需要24GB显存单卡微调12小时。24GB显存,也就是一块消费级RTX3090
ChatGPTLLaMA
一起学chatGPT一起学ai 2023-05-27
大杀器QLoRA终于放出了论文和相关实现。单个GPU即可部署的ChatBot,甚至达到了ChatGPT 99%的能力。只需使用消费级GPU微调12个小时就可以达到97%的ChatGPT水平。同时只用4B就可以保持16B精度的效果。QLoRA通过以下三个创新点来优化资源:1. 4Bit NormalFloat 4比特量化2. Double Quantization 双重量化3. Paged Optimizers 分页优化器QLoRA是在LORA的基础上,先对Transformer进行4Bit量化,
ChatGPTLoRA
AI研习所 2023-05-25
还推出新AI加速技术,光刻计算速度提升40倍
量子位 2023-03-22
国际在线消息(记者石丽敏):12月27日,2024“打卡中国·古韵潮音——你好,大湾区!”本次活动由国家互联网信息办公室网络传播局指导,广东省互联网信息办公室、国际在线主办,珠海市互联网信息办公室、国际在线广东频道承办。
国际在线 2024-12-27
华尔街见闻获悉,在小米“人车家全生态”合作伙伴大会上,小米集团合伙人、总裁卢伟冰透露,小米全球月活跃用户数已超6.86亿,小米澎湃OS互联能力日均使用超4000万次,小米IoT已连接设备数达到8.6亿台。小米智能手机的全球出货量预计同比增长2350万台,高端手机2024年销量同比增长43%。
华尔街见闻 2024-12-27
今天(12月26日),我国自主设计建造的深远海多功能科学考察及文物考古船“探索三号”在广州南沙正式交付启航。“探索三号”是我国首艘具有覆盖全球深远海探测并具备冰区载人深潜支持能力的综合科考船。“探索三号”船长约104米、排水量约10000吨,最大航速16节、艏艉双向破冰、续航力15000海里、载员80人。
北青网 2024-12-27
联诚精密(002921)12月27日在互动平台表示,公司下属子公司的部分零件产品应用于工业机器人领域,人形机器人未来市场空间广阔,公司将积极研究探索人形机器人领域的业务发展机会。
证券时报 2024-12-27
日前,在中国通信标准化协会、中国信通院在京举办的2024数据资产管理大会上,亚信科技携广东、河南、重庆、河北和云南客户打造的相关项目分别获评大数据“星河”奖的“典型案例”“潜力案例”,亚信科技作为代表性厂商入选《数据治理产业图谱3.0》。
砍柴网 2024-12-27
OPPOA5Pro采用了一块超亮阳光屏,分辨率为1080*2412,手动最高亮度600nits,全局激发亮度最高可达1200nits。而根据配色不同,砂岩紫与红色特别版后盖采用晶盾玻璃,磐石黑与石英白采用高分子玻纤材料。
IT168 2024-12-27
卷向海外,竞争对手仍是国内同行;招投标价格断崖下跌,订单持续性下降……国产机器人内卷加剧。12月26日,在2024中国机器人网年会圆桌对话中,一众机器人企业探讨行业的内卷与破局。当前,国内机器人本体企业约上千家,供需失衡加剧行业内卷,机器人产品同质化直接决定了招投标价低者得的导向。
澎湃新闻 2024-12-27
【CNMO科技消息】近日,CNMO注意到,vivo上线了一款vivoY200+新机。高通骁龙4Gen2是高通旗下的入门级手机SoC,采用三星4nm工艺制程,CPU采用两颗性能核心+六颗能效核心组成的八核心方案。
手机中国 2024-12-27
快科技12月27日消息,利民新款风冷散热器已经上市,首发269元。据悉,这款散热器在外观设计上采用了纯黑色的纳米涂层处理技术,不仅保持了卓越的散热性能,还有效防止了金属鳍片和热管遭受锈蚀的困扰,确保了产品的长久耐用。
驱动之家 2024-12-27
视频生成、语音交互等AI应用近年来持续火热,在2024年已让越来越多用户得到高效便捷的体验。更令业界瞩目的是,2024年各传统行业开始拥抱AI技术,将行业数据、计算模型赋予具备深度学习能力的AI,在工业生产领域开启规模化应用的路径。
中国战略新兴产业 2024-12-27
Copyright © 2025 aigcdaily.cn 北京智识时代科技有限公司 版权所有 京ICP备2023006237号-1