Python SDK for Agent AI Observability, Monitoring and Evaluation Framework. Includes features like agent, llm and tools tracing, debugging multi-agentic system, self-hosted dashboard and advanced analytics with timeline and execution graph view
RagaAI-Catalyst 是一个专为大模型(LLM)与智能体(Agent)开发设计的 Python 观测、监控与评估平台。它通过提供从追踪调试到安全性保障的一站式工具链,帮助开发者有效提升复杂 AI 应用的性能与稳定性。
核心功能包括:实现对 LLM 调用、工具使用以及多智能体交互过程的深度追踪与可视化分析。支持数据集管理、自动化评估与合成数据生成,助力开发者更高效地进行模型测试与优化。提供提示词管理与内置安全防护机制,确保生产环境中 AI 应用的合规性与质量。支持通过执行图与时间轴视图进行复杂系统调试,帮助定位智能体行为中的潜在逻辑故障。
该项目适用于从事 LLM 应用开发、AI 智能体构建以及 MLOps 的工程团队。特别适合需要对生产级复杂 AI 工作流进行深度监控、性能评估和安全红队测试的研发场景。