Über diesen Skill
Practical workflows for assessing and improving product-specific LLM evaluations.
Warum wir es empfehlen
A focused audit of product evaluation artifacts, including judge validation against human labels.
Skills in dieser Sammlung
1 Skills- Ansehen →
Eval Audit
Audit an LLM evaluation pipeline for missing error analysis, unvalidated judges, data leakage and stale checks.
Wobei es hilft
- Review an existing LLM evaluation system and prioritize evidence-backed improvements.
Vor der Nutzung
- Provide evaluation traces, judge prompts, labeled data or other pipeline artifacts; an observability integration is optional.
Quellen und Referenzen
Die Originalquellen sind unten verlinkt. Praktische Einstiegsideen sind redaktionelle Vorschläge von SkillHey.