StackFlow AI Platform
访问Chatbox 官网下载对应操作系统的安装包并进行安装。
Model Provider
和Add
。OpenAI API Compatible
http://IP:8000/v1
/chat/completions
Chat Settings
选项卡,关闭以下配置选项。Auto-Generate Chat Titles(自动生成聊天标题)
Inject default metadata(在 CHAT 标签下注入默认元数据)
点击 New Chat
创建新会话,输入信息并发送,即可收到模型回复。
p256
的单次最大 token 输入为 256,其他无特殊标记的模型单次最大 token 输入为 128。