LiteLLM是一個開源庫,旨在簡化LLM的完成和嵌入調用。LiteLLM擁有友好的介面,使得與各種LLM模型的高效互動變得輕而易舉。
要開始使用 LiteLLM,首先,導入 'litellm' 庫並配置所需的環境變數,例如 OPENAI_API_KEY 和 COHERE_API_KEY,以供您的 LLM API 金鑰使用。在設置這些變數後,您可以開發一個 Python 函數,使用 LiteLLM 進行 LLM 完成調用。這個強大的工具還提供了一個示範遊樂場,讓您通過編寫 Python 代碼和檢查輸出來比較各種 LLM 模型。