Langfuse Vibe 项目

Langfuse 是一个开源的 LLM 应用可观测性平台，帮助团队追踪、调试和优化 AI 应用的 prompts、responses、token 消耗和延迟。Y Combinator W23 孵化项目，GitHub 32k+ stars。

核心解决问题：AI 应用上线后缺乏可见性——不知道 prompt 模板的实际调用量、不知道哪个模型表现更好、不知道 token 成本从哪里来。Langfuse 把 AI 应用的运行情况全部可视化。

主要功能： • Tracing：自动追踪每次 LLM 调用的完整上下文，包括输入 prompt、输出 response、token 消耗、延迟、模型版本 • 评估（Evaluation）：内置和自定义评估指标，量化输出质量，追踪质量趋势 • Prompt 管理：集中管理所有 prompt 模板，支持版本控制和 A/B 测试 • Analytics 面板：Token 消耗成本分析、模型对比、延迟分布、错误率追踪 • 支持 SDK：Python、JS/TS、LangChain、LlamaIndex 官方集成 • 部署灵活：SaaS 版开箱即用，也支持 Docker 一键自部署，数据不出自己的基础设施

适用人群：AI 应用开发团队、需要优化 LLM 成本和质量的团队。