1000000000！微软改进Transformer一次能记住这么多token了

作者：量子位发布时间：2023-07-09

微软亚研院最新研究，有点震撼：他们开发了一个Transformer变体，居然将其token拓展到了10亿。什么概念？目前最强的GPT-4也才最大支持一次处理32k token，相当于50页文字。...【查看原文】

相关资讯

Stable diffusion 模型，竟然有这么多……

昨天发现 Stable diffusion 的模型有这么多，根本分不出优劣。希望将来有谁能做个视频，把各种有特色的，列个样张效果什么的，要不然真吃不准该下哪个…… 如果全部下载，就太疯狂了！仍然还得一个个测试。这密密麻麻的模型库，让人想起十多年前使用拼音加加那个时期。当时也下载了一堆各种特色的词库，自己调配得不亦乐乎，还亲自给它P了一堆浮标分享在论坛里……可惜加加论坛关闭很久很久了。

Stable Diffusion

奇葩革命 2023-02-14

支持100万token「大世界模型」火了，一次能分析1小时视频内容

这项研究为语言模型更好地理解物理世界铺平了道路。最近，谷歌发布的Gemini 1.5多模态模型和OpenAI的视频生成技术Sora引发了科技界的广泛讨论。Gemini 1.5以其处理百万级别上下文的能力受到赞誉，而Sora模型因能够理解物理运动中的世界而被誉为“世界模型”。尽管它们的技术成就令人瞩目，但仍有局限性，例如Sora模型在复现一些复杂场景，比如逆向跑步机上跑步的人时，就显得有些力不足。随着大模型技术的迅猛发展，我们也逐渐意识到了它们的局限性。例如，对于那些难以用语言描述的现实世界内容，

谷歌 OpenAI

格物时间 2024-02-19

ChatGPT回答提问：这么多乐器，为什么要选择钢琴？

选择钢琴作为学习的乐器有许多原因。以下是一些选择钢琴的理由：1. 多功能性：钢琴是一种非常多功能的乐器。它可以弹奏不同种类的音乐，包括古典音乐、流行音乐、爵士乐等等。钢琴还可以用来伴奏歌曲或合唱。2. 音乐基础：钢琴是一种非常基础的乐器，因为它可以教授音乐理论、节奏、和声和乐理等方面的知识。学习钢琴可以帮助培养学生的音乐基础，这对学习其他乐器或进行音乐创作都非常有帮助。3. 技术性：钢琴需要学生使用双手和双脚同时演奏，这需要很高的技术水平。学习钢琴可以帮助学生提高协调性、手眼协调能力和速度等方面的技术水平

ChatGPT

交子爱乐小陈老师 2023-04-23

在西安，这么多套路，想用ChatGPT不要被割韭菜

2023年5月19日（周五），西安创业社群活动品牌“聊易聊”第47期活动邀请了晁杨博为大家做《在西安，使用ChatGPT如何避免被割韭菜？》的主题分享。晁杨博是北辰三维视觉创始人，前西安维塑科技市场

ChatGPT

易旻昊 2023-05-20

奥特曼回到OpenAI了：第一次也是最后一次戴访客牌

」从照片可以看出，这是OpenAI今天的第四位访客，奥斯曼表情充满不屑，带着强烈的复仇暗示。尽管是以访客身份回到OpenAI，但很显然，这是一次谈判之旅。其中一位人士表示，奥特曼周五在没有任何通知的情况下被…

阿尔特曼 OpenAI

鞭牛士 2023-11-20

近期资讯

如何高效解决打印机常见问题与使用技巧指南

打印机在我们的日常生活中扮演着越来越重要的角色，无论是工作、学习还是家庭使用，打印机都能帮助我们将数字信息转化为纸质文件。一般来说，打印机主要有几个组成部分。你能看到的，有打印机机身、进纸口、出纸口、控制面板，还有一些接口，比如USB接口和网络接口。每个部分各有其功能，控制面板上会有一些按钮和指示灯，帮助你了解打印机的状态。

新报观察 2024-12-30

如何轻松设置智能手机的抬腕亮屏功能以提升使用便利性

在现代生活中，智能手机已经成为了我们生活中不可或缺的一部分。每天都有人在手机上忙碌，而为了提高使用的便利性，许多手机都搭载了一些实用的功能，比如“抬腕亮屏”。这项功能可以让我们在抬起手腕的瞬间，屏幕就自动亮起，省去了按键或者触摸屏幕的麻烦。今天，我们就来聊聊如何设置这个功能，让你的手机使用起来更加顺手。

新报观察 2024-12-30

掌握五笔输入法：高效输入汉字的技巧与经验分享

根据五笔的字根表，我们可以找到“加”的字根是“加”（字根为“g”），而“丰”的字根是“丰”（字根为“f”）。可以通过一些五笔输入的练习软件，或者找一些在线的五笔打字练习网站。还有，尽量使用五笔输入法来进行日常的文字输入，不论是聊天还是写文章，久而久之，你会发现自己的输入速度提升得很快。

新报观察 2024-12-30

贵州盈德气体取得上塔压力控制装置专利，具有精确的压力控制效果

金融界2024年12月30日消息，国家知识产权局信息显示，贵州盈德气体有限公司取得一项名为“一种上塔压力控制装置”的专利，授权公告号CN222218661U，申请日期为2024年3月。专利摘要显示，本实用新型涉及空分设备技术领域，尤其涉及一种上塔压力控制装置。

金融界 2024-12-30

上海远怀智能取得回流比控制器专利，解决相关控制问题

金融界2024年12月30日消息，国家知识产权局信息显示，上海远怀智能科技股份有限公司取得一项名为“一种回流比控制器”的专利，授权公告号CN222218662U，申请日期为2024年4月。

金融界 2024-12-30

山西潞安煤基清洁能源取得常压分馏塔压力平衡控制系统专利，保证了干气的高品质

金融界2024年12月30日消息，国家知识产权局信息显示，山西潞安煤基清洁能源有限责任公司取得一项名为“一种常压分馏塔压力平衡控制系统”的专利，授权公告号CN222218660U，申请日期为2024年2月。

金融界 2024-12-30

如何顺利找回丢失的QQ号：详细步骤与实用技巧

在现代生活中，QQ号就像是我们社交的一个重要通行证。无论是和朋友聊天，还是加入各种兴趣群组，QQ号都扮演着不可或缺的角色。但是，有时候因为种种原因，比如忘记了密码，或者手机丢失，导致我们无法登录自己的QQ号，这时候就需要找回自己的QQ号了。别担心，找回QQ号其实并没有想象中那么复杂。下面我就来跟大家分享一下找回QQ号的一些方法。

新报观察 2024-12-30

湖北特腾取得一种物料降温结晶罐专利，实现降温避免从上方盘管多余部分流通

金融界2024年12月30日消息，国家知识产权局信息显示，湖北特腾新材料技术有限公司取得一项名为“一种物料降温结晶罐”的专利，授权公告号CN222218667U，申请日期为2024年4月。

金融界 2024-12-30

沙县宏盛塑料取得气体冷凝装置专利，有效提高废水处理效率

金融界2024年12月30日消息，国家知识产权局信息显示，沙县宏盛塑料有限公司取得一项名为“一种气体冷凝装置”的专利，授权公告号CN222218663U，申请日期为2024年4月。

金融界 2024-12-30

如何高效更新手机应用，提升使用体验与安全性

在我们的日常生活中，手机应用（app）已经成为了不可或缺的一部分。接下来，就让我带你走进app更新的世界，看看这个看似简单的操作背后，究竟有什么值得注意的地方。不过，有些朋友可能会问，为什么要更新app呢？

新报观察 2024-12-30

1000000000！微软改进Transformer一次能记住这么多token了

推荐体验

相关资讯

Stable diffusion 模型，竟然有这么多……

支持100万token「大世界模型」火了，一次能分析1小时视频内容

ChatGPT回答提问：这么多乐器，为什么要选择钢琴？

在西安，这么多套路，想用ChatGPT不要被割韭菜

奥特曼回到OpenAI了：第一次也是最后一次戴访客牌

近期资讯

如何高效解决打印机常见问题与使用技巧指南

如何轻松设置智能手机的抬腕亮屏功能以提升使用便利性

掌握五笔输入法：高效输入汉字的技巧与经验分享

贵州盈德气体取得上塔压力控制装置专利，具有精确的压力控制效果

上海远怀智能取得回流比控制器专利，解决相关控制问题

山西潞安煤基清洁能源取得常压分馏塔压力平衡控制系统专利，保证了干气的高品质

如何顺利找回丢失的QQ号：详细步骤与实用技巧

湖北特腾取得一种物料降温结晶罐专利，实现降温避免从上方盘管多余部分流通

沙县宏盛塑料取得气体冷凝装置专利，有效提高废水处理效率

如何高效更新手机应用，提升使用体验与安全性

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响