Langfuse

https://langfuse.com/

Langfuse 是一个开源的 LLM 工程平台，提供可观测性、度量、评估、提示管理以及调试和改进 LLM 应用的游乐场。

功能特点：

• 可观测性： 实时监控和理解您的 LLM 应用的行为。
• 度量： 跟踪和分析关键性能指标以优化您的模型。
• 评估： 进行全面的评估以评估模型的质量和效果。
• 提示管理： 管理和组织提示以实现一致和高效的使用。
• 游乐场： 一个沙盒环境，用于实验、调试和改进您的 LLM 应用。
• 开放 API： 使用灵活和开放的 API 构建下游用例。