llm-connector

Sumor Cloud 도구입니다.
자세한 문서

다중 클라우드 공급업체를 위한 llm 커넥터입니다.

설치

npm i @sumor/llm-connector --save

전제 조건

Node.JS 버전

Node.JS 버전 16.x 이상이 필요합니다.

Node.JS ES 모듈 필요

이 패키지는 ES 모듈로 작성되어 있으므로, package.json 파일에서 다음 코드를 변경해야 합니다.

{
  "type": "module"
}

사용법

채팅

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openai',
  key: '123'
})

const response = await model.chat('gpt-3.5-turbo', [
  {
    role: 'system',
    content: '도움이 되는 어시스턴트입니다.'
  },
  {
    role: 'user',
    content: '안녕하세요'
  }
])

console.log(response)
// 결과: { role: 'assistant', content: '안녕하세요, 오늘 무엇을 도와드릴까요?' }

사용자 지정 API 엔드포인트 URL

import Model from '@sumor/llm-connector'

const model = new Model({
  type: 'openai',
  key: '123',
  endpoint: {
    chat: 'https://api.openai.com/v1/chat'
  }
})