OpenLIT + Muapi

OpenLIT は OpenAI Python SDK で送信する Muapi リクエストを計測できます。

インストールと初期化

pip install openlit openai

リクエストの前に OpenLIT を初期化し、OpenTelemetry Collector のエンドポイントを設定します。

import openlit
openlit.init(otlp_endpoint="http://127.0.0.1:4318")

import os
from openai import OpenAI

client = OpenAI(
    api_key=os.environ["MUAPI_API_KEY"],
    base_url="https://api.muapi.ai/v1",
)
response = client.chat.completions.create(
    model="YOUR_MUAPI_TEXT_MODEL_ID",
    messages=[{"role": "user", "content": "Hello!"}],
)
print(response.choices[0].message.content)

Muapi にリクエストを送る

例のモデル ID を Muapi のテキストモデル一覧にある ID に置き換えます。 トレースにはプロンプトや応答が含まれる場合があります。Collector のプライバシーと保持設定を確認してください。