跳到正文
原文
HackerNoon· Akshay Sharma·· 9 小时前AI 评分46

Claude Haiku、Sonnet 与 Opus 在 64 个故障数据管道上的基准测试

Benchmarking Claude Haiku, Sonnet, and Opus on 64 Broken Data Pipelines

AI 导读

一位数据工程师用 DuckDB 搭建小型交易管道并制造 64 种故障,实测 Claude Haiku、Sonnet、Opus 的修复能力:Sonnet 与 Opus 均正确修复 50 个,但 Opus 相对成本为 2.56、Sonnet 仅 0.63,Haiku 修复 38 个并写出 2 次错误数据。

来源:HackerNoon · hackernoon.com