Hugging Face Blog

Baseten on Hugging Face Inference Providers 🔥

8.5内容质量

TL;DR · AI 摘要

Baseten成为Hugging Face Hub支持的推理服务提供商,支持多种模型并提供集成方法,提升开发者使用AI模型的便利性。

核心要点

  • Baseten支持包括DeepSeek V4 Flash、GLM-5.2等在内的多个前沿模型。
  • 开发者可通过Hugging Face SDKs(Python和JavaScript)直接调用Baseten服务。
  • Hugging Face账户可设置自定义API密钥,请求可直接路由至Baseten或通过HF处理。

结构提纲

按章节快速跳转。

  1. 宣布Baseten成为Hugging Face Hub支持的推理服务提供商,扩展模型服务能力。

  2. Baseten支持LLM、语音合成等模型类型,首批集成对话和文本生成任务。

  3. 通过网页UI设置API密钥,支持自定义密钥和HF路由两种调用模式。

  4. 提供Python和JavaScript SDK,示例展示如何调用DeepSeek V4 Flash模型。

  5. 兼容Pi、OpenCode等主流Agent Harness,无需额外代码即可接入模型。

  6. 将逐步扩展支持更多任务类型,如图像生成、代码生成等。

思维导图

用一张图看清主题之间的关系。

查看大纲文本(无障碍 / 无 JS 友好)
  • Baseten on Hugging Face
    • 支持的模型
      • DeepSeek V4 Flash
      • GLM-5.2
      • Kimi K3
    • 集成方式
      • 网页UI设置API密钥
      • Python/JS SDK调用
      • Agent Harness兼容
    • 使用模式
      • 自定义密钥直连
      • 通过HF路由

金句 / Highlights

值得收藏与分享的关键句。

#Hugging Face#推理服务#AI基础设施#Baseten
打开原文

Baseten 在 Hugging Face 推理服务提供商中 🔥

返回文章列表

[-1

]

[0

发布于 2026 年 8 月 6 日

GitHub 上的更新

点赞

25

[

  • +19

Alex Ker

alexker-baseten

关注

baseten

Roland Crosby

rolandcrosby-baseten

Sid Shanker

squidarth

Johan

johan-baseten

Célina Hanouti

celinah

Simon Brandeis

sbrandeis

Lucain Pouget

Wauplin

merve

我们非常高兴地宣布,Baseten 现在已成为 Hugging Face Hub 的官方推理服务提供商!

Baseten 加入我们不断扩展的生态系统,直接在 Hub 的模型页面上增强无服务器推理的广度和能力。推理服务提供商还与我们的客户端 SDK(适用于 JS 和 Python)无缝集成,使您能够轻松使用各种模型并选择首选提供商。

Baseten 是一个覆盖无服务器 AI、训练等的 AI 基础设施平台。通过包含大量前沿模型的目录,Baseten 让开发者能够以最小的设置将各种 AI 功能快速集成到其应用中。

Baseten 支持广泛类型的模型 - 从 LLM 到文本到语音等。作为此次集成的一部分,Baseten 在 Hugging Face 上推出对对话和文本生成任务的支持,使用户可以访问 Kimi K3、最新 DeepSeek V4 Flash、GLM-5.2 等流行开源权重 LLM。其他任务的支持也将很快推出!

查看 Baseten 支持的完整模型列表。

在 Hugging Face 上关注 Baseten:https://huggingface.co/baseten .

实现方式

在网站 UI 中

  • 在您的用户账户设置中,您可以:
  • 为已注册的提供商设置自己的 API 密钥。如果没有设置自定义密钥,您的请求将通过 HF 路由。
  • 按偏好顺序排列提供商。这适用于模型页面中的小部件和代码片段。
  • 如前所述,调用推理服务提供商时有两种模式:
  • 自定义密钥(请求直接发送到对应的推理服务提供商,使用您自己的 API 密钥)
  • 通过 HF 路由(在这种情况下,您不需要提供商的令牌,费用将直接从您的 HF 账户收取,而不是提供商的账户)
  • 模型页面展示第三方推理服务提供商(与当前模型兼容的提供商,按用户偏好排序)

通过客户端 SDK

Baseten 可通过 Hugging Face SDK 访问 - Python 使用 huggingface_hub(>= 1.26.1),JavaScript 使用 @huggingface/inference。

以下示例展示了如何通过 Baseten 使用最新的 DeepSeek V4 Flash。使用 Hugging Face 令牌进行身份验证 - 请求将自动路由到 Baseten。

#### 通过您最喜欢的 Agent Harness

Hugging Face 推理服务提供商已集成到大多数 Agent Harness 中 - 包括 Pi、OpenCode、Hermes Agents、OpenClaw 等。这意味着您可以直接将 baseten 托管的模型插入到您最喜欢的工具中,无需任何额外的胶水代码。浏览完整的集成列表。

#### 通过 Python

code
import
os
from
openai
import
OpenAI

client = OpenAI(
    base_url=
"https://router.huggingface.co/v1"
,
    api_key=os.environ[
"HF_TOKEN"
],
)

completion = client.chat.completions.create(
    model=
"deepseek-ai/DeepSeek-V4-Flash-0731:baseten"
,
    messages=[
        {
"role"
:
"user"
,
"content"
:
"编写一个使用记忆化的 Python 函数,返回第 n 个斐波那契数。"
}
    ],
)
print
(completion.choices[
0
].message)

#### 通过 JS

code

import { OpenAI } from "openai" ; const client = new OpenAI ({ baseURL : "https://router.huggingface.co/v1" , apiKey : process. env . HF_TOKEN , }); const chatCompletion = await client. chat . completions . create ({ model : "deepseek-ai/DeepSeek-V4-Flash-0731:baseten" , messages : [ { role : "user" , content : "Write a Python function that returns the nth Fibonacci number using memoization." , }, ], }); console . log (chatCompletion. choices [ 0 ]. message );

code

## 计费

对于直接请求,即使用推理服务提供商的密钥时,您将根据对应提供商的计费标准进行收费。例如,如果您使用的是 baseten API 密钥,您将在 baseten 账户上被计费。

对于路由请求,即通过 Hugging Face Hub 进行身份验证时,您只需支付标准提供商的 API 费率。我们不会额外加价;我们只是直接传递提供商的费用。(未来,我们可能会与提供商合作伙伴建立收入分成协议。)

重要提示 ‼️ PRO 用户每月可获得价值 2 美元的推理积分。您可以在所有提供商之间使用这些积分。🔥

订阅 Hugging Face PRO 计划,即可获得推理积分、ZeroGPU、Spaces Dev 模式、20 倍更高的限制等权益。

我们还为已登录的免费用户提供一定配额的免费推理服务,但如果您有能力请升级到 PRO 吧!

## 反馈与下一步

我们非常期待您的反馈!在这里分享您的想法和评论:https://huggingface.co/spaces/huggingface/HuggingDiscussions/discussions/49

## 本文提到的模型 3

## 本文提到的 Spaces 1

更多来自我们博客的文章

llms

inference-providers

deepinfra

## Hugging Face 推理服务提供商上的 DeepInfra 🔥

- +4

14

2026年4月29日

scaleway

## Hugging Face 推理服务提供商上的 Scaleway 🔥

- +5

24

2025年9月19日

### 社区

AlessandroAle83

1天前

[2

感谢,出色的工作。我很快会仔细查看!

查看翻译

回复

编辑

预览

通过将文件拖入文本输入框、粘贴或

点击此处

上传图片、音频和视频。

轻点或粘贴此处以上传图片

评论

· 注册或登录以评论

- +13