Haystack - TokenLab

Visão Geral

O OpenAIChatGenerator do Haystack suporta implantações personalizadas compatíveis com OpenAI através do api_base_url. Aponte-o para o TokenLab e forneça uma chave de API do TokenLab.

Tipo: Framework de RAG e pipelineCaminho Principal: Chat Completions compatíveis com OpenAINível de Suporte: Caminho compatível com OpenAI suportado

Ambiente

export TOKENLAB_API_KEY="sk-your-tokenlab-key"

Gerador

from haystack.components.generators.chat import OpenAIChatGenerator
from haystack.dataclasses import ChatMessage
from haystack.utils import Secret

generator = OpenAIChatGenerator(
    api_key=Secret.from_env_var("TOKENLAB_API_KEY"),
    api_base_url="https://api.tokenlab.sh/v1",
    model="claude-sonnet-5",
)

response = generator.run(
    messages=[ChatMessage.from_user("Summarize this document in one sentence.")]
)

Notas sobre o Endpoint

Use este caminho para pipelines de gerador de chat do Haystack. Para embeddings, configure o componente de embedding correspondente do Haystack com a URL base /v1 do TokenLab, caso seu pipeline utilize embeddings do TokenLab.