llm-connector

Sumor Cloud 工具。
更多文档

这是一个适用于多个云服务提供商的 llm 连接器。

支持的 LLM 提供商

openAI

OpenAI 是一个由盈利实体 OpenAI LP 和非盈利实体 OpenAI Inc. 组成的研究实验室。该公司旨在确保人工智能造福全人类。

• gpt-3.5-turbo
• gpt-4o

qianWen

阿里巴巴千问是一项基于云的人工智能服务，提供各种人工智能能力，包括自然语言处理，计算机视觉和机器学习。

• qwen-turbo
• qwen-plus
• qwen-max
• qwen-max-longcontext

安装

npm i @sumor/llm-connector --save

先决条件

Node.JS 版本

需要 Node.JS 版本为 18.x 或更高

需要 Node.JS 的 ES 模块

由于此包是使用 ES 模块编写的，请更改您的 package.json 文件中的以下代码：

{
  "type": "module"
}

用法

聊天

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI', // 或 'qianWen'
  key: '123'
})

const response = await model.chat('gpt-3.5-turbo', [
  {
    role: 'system',
    content: '您是一个乐于助人的助手。'
  },
  {
    role: 'user',
    content: '你好'
  }
])

console.log(response)
// 输出：{ role: 'assistant', content: '你好，今天我能为您提供什么帮助？' }

图像

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI', // 或 'qianWen'
  key: '123'
})

const response = await model.image('dall-e-3', '一幅花瓶的画', '1024x1024')
console.log(response)
// 输出：https://oaidalleapiprodscus.blob.core.windows.net/private/org-B7O45Q0iSubrkWb...

自定义 API 端点 URL

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI',
  key: '123',
  endpoint: 'https://api.openai.com',
  chat: '/v1/chat',
  image: '/v1/image'
})