Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

作者：HuggingFace发布时间：2024-01-04

太长不看版: Hub 上有不少数据集没有语言元数据，我们用机器学习来检测其语言，并使用 librarian-bots 自动向这些数据集提 PR 以添加其语言元数据。 Hugging Face Hub...【查看原文】

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

引言我们很高兴地宣布由 Technology Innovation Institute (TII) 训练的开源大模型 Falcon 180B 登陆 Hugging Face! Falcon 180B 为开源大模型树立了全新的标杆。作为当前最大的开源大模型，有180B 参数并且是在在 3.5 万亿 token 的 TII RefinedWeb 数据集上进行训练，这也是目前开源模型里最长的单波段预训练。TII: https://falconllm.tii.ae/RefinedWeb:https://hf.co

Hugging Face

HuggingFace 2023-09-06

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

Google 发布了最新的开放大语言模型 Gemma 2，我们非常高兴与 Google 合作，确保其在 Hugging Face 生态系统中的最佳集成。你可以在 Hub 上找到 4 个开源模型 (2 个基础模型和 2 个微调模型) 。发布的功能和集成包括：Hub 上的模型https://hf.co/collections/google/g-667d6600fd5220e7b967f315Hugging Face Transformers 集成https://github.com/huggingface/t

谷歌大语言模型 Hugging Face GitHub

HuggingFace 2024-06-28

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

在 Hugging Face，我们一直致力于提升服务安全性，因此，我们将对通过 Git 与 Hugging Face Hub 交互时的认证方式进行更改。从 2023 年 10 月 1 日开始，我们将不再接受密码作为命令行 Git 操作的认证方式。我们推荐使用更安全的认证方法，例如用个人访问令牌替换密码或使用 SSH 密钥。背景近几个月来，我们已经实施了各种安全增强功能，包括登录提醒和 Git 中对 SSH 密钥的支持，不过，用户仍然可以使用用户名和密码进行 Git 操作的认证。为了进一步提高安全性，我们

Hugging Face

HuggingFace 2023-08-31

Hugging Face 的 Transformers 库学习总结

Transformers 库是什么自然语言处理简称 NLP ，是语言学习和机器学习交叉领域，专注于理解与人类语言相关的一切。常见的 NLP 任务列表如下：对整个句子进行分类：获取评论的情绪，检

Hugging Face 机器学习

tinker 2023-08-13

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers 说明：首次发表日期：2024-09-19

Hugging Face

shizidushu 2024-09-19

近期资讯

如何在Mac上使用Boot Camp安装双系统（macOS与Window

为了满足这种需求，安装双系统就成了一种不错的选择。如果你想在macOS中切换到Windows，可以在“系统偏好设置”中找到“启动磁盘”，选择你想要的系统，然后重启。

新报观察 2024-12-31

如何充分利用QQ的多种功能提升生活与工作效率

软件，只要好好利用，就能为我们的生活和工作带来很多便利。无论是聊天、工作、学习，还是记录生活的点滴，QQ都能提供很好的支持。只要掌握了一些使用技巧，设置好隐私和个性化选项，相信你会发现QQ的魅力所在。希望大家都能把QQ用得更好，让它成为生活中不可或缺的好帮手。

新报观察 2024-12-31

如何在微信中轻松删除不常用的小程序步骤详解

那么，如何在微信里删除这些小程序呢？小程序是微信推出的一种轻量级应用，它不需要下载安装，直接在微信里就能使用。

新报观察 2024-12-31

如何有效利用微信屏蔽功能管理社交圈，享受宁静使用体验

在我们日常使用微信的过程中，难免会遇到一些烦人的情况，比如被某些朋友的消息刷屏，或者被一些不太想聊天的人打扰。

新报观察 2024-12-31

如何巧妙使用微信朋友圈，分享生活与互动心得总结

微信朋友圈是我们日常生活中一个不可或缺的社交功能。在这个平台上，大家可以分享生活中的点滴，展示自己的个性，记录重要的时刻。但对于很多刚接触微信的人来说，如何使用朋友圈、发什么内容、怎么与朋友互动，可能不是那么清楚。下面就来聊聊微信朋友圈的一些使用心得和小窍门。首先，朋友圈的界面其实很简单。

新报观察 2024-12-31

Windows 10 使用技巧：提升操作体验的实用指南与建议

Windows10系统是目前很多人使用的操作系统，它的界面友好，功能丰富，适合各种场景的使用。无论你是学生、上班族，还是游戏爱好者，Windows10都能给你带来不错的体验。不过，很多用户在使用过程中可能会遇到一些问题，或者想要了解一些小技巧。接下来，我就来跟大家聊聊关于Windows10的一些实用操作和技巧，希望能帮到你。

新报观察 2024-12-31

如何快速关闭微信听筒模式，提升语音通话体验的小技巧

这种模式在接听电话时非常有用，但在使用微信语音通话或语音消息时，可能会让人感到不便。如果有，及时更新到最新版本，很多小问题在更新中都会得到修复。

新报观察 2024-12-31

如何在抖音平台上高效找到你想找的人：实用技巧与方法分享

而抖音，作为一个广受欢迎的短视频平台，吸引了无数用户。在抖音上，有时候我们会想要找到某个人，无论是老朋友、同事，还是偶然间看到的有趣创作者。那到底应该怎么找人呢？

新报观察 2024-12-31

千分号的重要性及其在数据表达中的应用和输入方法探讨

在日常生活中，大家或多或少都会接触到各种数字，尤其是在一些数据统计、报告或者是科学研究中，千分号的使用显得尤为重要。可能你会问，千分号到底是什么呢？

新报观察 2024-12-31

如何在电脑上畅玩手机游戏：多种方法详解与注意事项

在现代社会，手机游戏已经成为了很多人日常生活中不可或缺的一部分。首先，咱们得了解一下，为什么要在电脑上玩手游。

新报观察 2024-12-31

Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

推荐体验

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

Hugging Face 的 Transformers 库学习总结

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

近期资讯

如何在Mac上使用Boot Camp安装双系统（macOS与Window

如何充分利用QQ的多种功能提升生活与工作效率

如何在微信中轻松删除不常用的小程序步骤详解

如何有效利用微信屏蔽功能管理社交圈，享受宁静使用体验

如何巧妙使用微信朋友圈，分享生活与互动心得总结

Windows 10 使用技巧：提升操作体验的实用指南与建议

如何快速关闭微信听筒模式，提升语音通话体验的小技巧

如何在抖音平台上高效找到你想找的人：实用技巧与方法分享

千分号的重要性及其在数据表达中的应用和输入方法探讨

如何在电脑上畅玩手机游戏：多种方法详解与注意事项

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响