跳到正文
原文
PostHog Blog· Cleo Lant·· 2026-01-15AI 评分38

PostHog 推出 LLM-as-a-Judge 评估功能,用 AI 自动打分拦截 AI slop

Stop AI slop: Run evals with LLM-as-a-Judge

AI 导读

PostHog 上线 evaluations 功能,用 LLM-as-a-judge 按相关性、有用性、毒性等标准自动给生成式 AI 输出打分,采样率可选 0.1%–100%,并内置 Relevance、Helpfulness、Jailbreak、Hallucination、Toxicity 五个模板。评估提示词与生成内容无关时标记为 N/A 以避免误判,用户也可自定义评估标准。

来源:PostHog Blog · posthog.com