llm-connector

Sumor Cloud 도구.
더 많은 문서

여러 클라우드 제공업체를 위한 llm 커넥터입니다.

지원되는 LLM 제공업체

openAI

OpenAI는 이윤을 추구하는 OpenAI LP 및 비영리 OpenAI Inc로 구성된 연구소입니다. 회사는 인공 일반 지능이 모든 인류에 이점을 가져다 줄 수 있도록 목표를 두고 있습니다.

• gpt-3.5-turbo
• gpt-4o

qianWen

알리바바 천문은 자연어 처리, 컴퓨터 비전 및 머신 러닝을 비롯한 다양한 AI 기능을 제공하는 클라우드 기반 AI 서비스입니다.

• qwen-turbo
• qwen-plus
• qwen-max
• qwen-max-longcontext

설치

npm i @sumor/llm-connector --save

전제 조건

Node.JS 버전

Node.JS 버전 18.x 이상이 필요합니다.

Node.JS ES 모듈 필요

이 패키지는 ES 모듈로 작성되었으므로 package.json 파일의 다음 코드를 변경해주세요:

{
  "type": "module"
}

사용법

채팅

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI', // 또는 'qianWen'
  key: '123'
})

const response = await model.chat('gpt-3.5-turbo', [
  {
    role: 'system',
    content: '당신은 도움이 되는 조수입니다.'
  },
  {
    role: 'user',
    content: '안녕'
  }
])

console.log(response)
// 출력: { role: 'assistant', content: '안녕, 오늘 어떻게 도와 드릴까요?' }

이미지

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI', // 또는 'qianWen'
  key: '123'
})

const response = await model.image('dall-e-3', '꽃병 그림', '1024x1024')
console.log(response)
// 출력: https://oaidalleapiprodscus.blob.core.windows.net/private/org-B7O45Q0iSubrkWb...

사용자 정의 API 엔드포인트 URL

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openAI',
  key: '123',
  endpoint: 'https://api.openai.com',
  chat: '/v1/chat',
  image: '/v1/image'
})