mancitrus/system-prompts-and-models-of-ai-tools
1
0
Fork 0
mirror of https://github.com/x1xhlol/system-prompts-and-models-of-ai-tools.git synced 2026-06-17 23:09:35 +00:00
Code Issues Actions Packages Projects Releases Wiki Activity
e106a9a0d2
system-prompts-and-models-o.../dealix/docs/AI_OBSERVABILITY_AND_EVALS.md
Sami Assiri f79c69ff25 ci(dealix): root GitHub workflows, ai-company track, full Dealix API tree 
Made-with: Cursor
2026-05-01 14:03:52 +03:00

915 B
Raw Blame History

المراقبة والتقييم — AI في Dealix

ماذا نتتبع

  • إصدارات الـ prompts والنماذج (عبر Langfuse لاحقاً).
  • تكلفة/سير عمل، زمن، معدل إكمال.
  • معدل موافقة على المسودات، معدل حظر إجراءات خطرة.
  • جودة العربية (عينة بشرية + قواعد).
  • امتثال الاتصال.
  • إسناد النتائج للإيرادات (عبر Revenue Memory).

ماذا لا نسجل

  • محتوى يحتوي أسراراً خام.
  • PII غير ضرورر في السجلات.

التوصية التقنية

  • Langfuse: prompts/evals/traces.
  • OpenAI Agents SDK: tracing لمسارات الوكلاء.
  • Sentry: استثناءات.
  • OpenTelemetry: طلبات API.

الكود الحالي: تكامل اختياري في api/main.py عند توفر dealix.observability.