跳到主要内容

提供商文件端点

文件用于上传文档,这些文档可用于助手、微调和批量 API 等功能。

使用此功能可以直接调用提供商的 /files 端点,格式与 OpenAI 相同。

快速开始

  • 上传文件
  • 列出文件
  • 检索文件信息
  • 删除文件
  • 获取文件内容
  1. 设置 config.yaml
# for /files endpoints
files_settings:
- custom_llm_provider: azure
api_base: https://exampleopenaiendpoint-production.up.railway.app
api_key: fake-key
api_version: "2023-03-15-preview"
- custom_llm_provider: openai
api_key: os.environ/OPENAI_API_KEY
  1. 启动 LiteLLM 代理服务器
litellm --config /path/to/config.yaml

## RUNNING on http://0.0.0.0:4000
  1. 使用 OpenAI 的 /files 端点

上传文件

from openai import OpenAI

client = OpenAI(
api_key="sk-...",
base_url="http://0.0.0.0:4000/v1"
)

client.files.create(
file=wav_data,
purpose="user_data",
extra_body={"custom_llm_provider": "openai"}
)

列出文件

from openai import OpenAI

client = OpenAI(
api_key="sk-...",
base_url="http://0.0.0.0:4000/v1"
)

files = client.files.list(extra_body={"custom_llm_provider": "openai"})
print("files=", files)

检索文件信息

from openai import OpenAI

client = OpenAI(
api_key="sk-...",
base_url="http://0.0.0.0:4000/v1"
)

file = client.files.retrieve(file_id="file-abc123", extra_body={"custom_llm_provider": "openai"})
print("file=", file)

删除文件

from openai import OpenAI

client = OpenAI(
api_key="sk-...",
base_url="http://0.0.0.0:4000/v1"
)

response = client.files.delete(file_id="file-abc123", extra_body={"custom_llm_provider": "openai"})
print("delete response=", response)

获取文件内容

from openai import OpenAI

client = OpenAI(
api_key="sk-...",
base_url="http://0.0.0.0:4000/v1"
)

content = client.files.content(file_id="file-abc123", extra_body={"custom_llm_provider": "openai"})
print("content=", content)

支持的提供商:

OpenAI

Azure OpenAI

Vertex AI

Swagger API 参考