AI Evals Skills

ai-evals-course/evals-skills

Practical workflows for assessing and improving product-specific LLM evaluations.

Contenu mis à jour:

Voir sur GitHub
npx skills add ai-evals-course/evals-skills --skill eval-audit
1 764Étoiles126ForksDernier push du dépôt

À propos de ce Skill

Practical workflows for assessing and improving product-specific LLM evaluations.

Pourquoi ce choix

A focused audit of product evaluation artifacts, including judge validation against human labels.

Skills de cette collection

1 skills
  • Eval Audit

    Audit an LLM evaluation pipeline for missing error analysis, unvalidated judges, data leakage and stale checks.

    Voir →

À quoi il sert

  • Review an existing LLM evaluation system and prioritize evidence-backed improvements.

Avant de l’utiliser

  • Provide evaluation traces, judge prompts, labeled data or other pipeline artifacts; an observability integration is optional.

Sources et références

Les sources originales sont liées ci-dessous. Les pistes pratiques sont des suggestions de la rédaction de SkillHey.