Shopify Engineering·· 2026-08-05AI 评分48
Shopify 谈 Sidekick 的持续学习闭环:GraphQL agent 成本降 96%
Sidekick's continual learning loop
AI 导读
Shopify 用持续学习闭环把生产经验压缩进模型权重,其 GraphQL agent 在质量超过前沿模型的同时,延迟更低、成本降低 96%。闭环从定义质量开始:用评分标准把产品要求转成可打分维度,让两名最佳标注者对 25 条随机样本盲标并记录 Cohen's kappa,kappa 约 0.2 说明标准含糊需迭代。
来源:Shopify Engineering · shopify.engineering