llm-connector

Uma Ferramenta Sumor Cloud.
Mais Documentação

Este é um conector llm para vários provedores de nuvem.

Provedores de LLM Suportados

openAI

OpenAI é um laboratório de pesquisa composto pela OpenAI LP com fins lucrativos e pela OpenAI Inc sem fins lucrativos. A empresa tem como objetivo garantir que a inteligência artificial geral beneficie toda a humanidade.

• gpt-3.5-turbo
• gpt-4o

qianWen

Alibaba Qianwen é um serviço de inteligência artificial baseado em nuvem que fornece uma variedade de capacidades de IA, incluindo processamento de linguagem natural, visão computacional e aprendizado de máquina.

• qwen-turbo
• qwen-plus
• qwen-max
• qwen-max-longcontext

Instalação

npm i @sumor/llm-connector --save

Pré-requisitos

Versão do Node.JS

Necessita do Node.JS versão 18.x ou superior

Requer módulo ES do Node.JS

Como este pacote é escrito em módulo ES, por favor altere o seguinte código em seu arquivo package.json:

{
  "type": "module"
}

Uso

Chat

import Model from '@sumor/llm-connector'

const modelo = new Model({
  type: 'openAI', // ou 'qianWen'
  chave: '123'
})

const resposta = await modelo.chat('gpt-3.5-turbo', [
  {
    função: 'sistema',
    conteúdo: 'Você é um assistente prestativo.'
  },
  {
    função: 'usuário',
    conteúdo: 'Olá'
  }
])

console.log(resposta)
// Saída: { função: 'assistente', conteúdo: 'Olá, como posso ajudar hoje?' }

Imagem

import Model from '@sumor/llm-connector'

const modelo = new Model({
  type: 'openAI', // ou 'qianWen'
  chave: '123'
})

const resposta = await modelo.image('dall-e-3', 'uma pintura de um vaso de flores', '1024x1024')
console.log(resposta)
// Saída: https://oaidalleapiprodscus.blob.core.windows.net/private/org-B7O45Q0iSubrkWb...

URL de Ponto de Extremidade de API Personalizada

import Model from '@sumor/llm-connector'

const modelo = new Model({
  type: 'openAI',
  chave: '123',
  endpoint: 'https://api.openai.com',
  chat: '/v1/chat',
  image: '/v1/image'
})