参数
有关所有插件均可使用的配置项,请参阅插件通用配置。
templates
模板数组。
name
模板名称。请求路由时,请求应包含与配置的模板对应的模板名称。
template
模板规范。
model
LLM 模型名称,例如
gpt-4或gpt-3.5。更多可用模型请参见你的模型服务提供方 API 文档。messages
模板消息规范。
role
有效值:
system、user或assistant消息角色。
content
消息内容(提示词)。
max_req_body_size
有效值:
大于或等于 1
缓冲到内存中的请求体最大字节数。超过该上限的请求体会在模板处理前以 HTTP 400 被拒绝。自 API7 企业版 3.9.17 和 3.10.4,以及 APISIX 3.18.0 起可用。