跳转到主要内容

提供者值

llm.profiles.<name>.provider 中使用 groq

示例资料

{
  "llm": {
    "profiles": {
      "default": {
        "provider": "groq",
        "model": "llama-3.3-70b-versatile",
        "prompt": "Translate from {{source}} to {{target}}:\n\n{{input}}"
      }
    }
  }
}

必需的环境变量

export GROQ_API_KEY="your-groq-api-key"

可选环境变量

GROQ_BASE_URL 默认为 https://api.groq.com/openai/v1