Claude 3 Haiku vs Claude 3 Sonnet：基准对比

详细对比 Claude 3 Haiku 与 Claude 3 Sonnet 的基准表现、定价、上下文窗口与合规性。

发布: · 更新:

核心规格对比

规格Claude 3 HaikuClaude 3 Sonnet
厂商anthropicanthropic
版本3-haiku3-sonnet
发布日期2024-03-072024-03-04
上下文窗口200000 tokens200000 tokens
输入模态text, imagetext, image
输出模态texttext
许可ProprietaryProprietary
SOC2✓✓
HIPAA✗✗
GDPR✓✓
ISO 27001✗✗

基准测试结果

基准Claude 3 HaikuClaude 3 Sonnet胜出
ARC94.394.8Claude 3 Sonnet
BBH75.776.1Claude 3 Sonnet
GPQA44.435.9Claude 3 Haiku
GSM8K82.284Claude 3 Sonnet
HUMANEVAL69.474.5Claude 3 Sonnet
IFEVAL70.874.3Claude 3 Sonnet
MATH52.242.4Claude 3 Haiku
MMLU77.981.5Claude 3 Sonnet
MUSR58.164.1Claude 3 Sonnet
WINOGRANDE84.883.8Claude 3 Haiku

定价对比

项目 (每百万Token)Claude 3 HaikuClaude 3 Sonnet
输入$0.25$3
输出$1.25$15
缓存读$0$0
缓存写$0$0

Claude 3 Haiku 对比 Claude 3 Sonnet

模型概述

Claude 3 Haiku 与 Claude 3 Sonnet 均为 AI 模型市场的重要选项。本页对比两者在基准、定价与合规性上的差异。

核心规格对比

厂商发布日期上下文窗口许可证
Anthropic / Anthropic2024-03-07 / 2024-03-04200K / 200KProprietary / Proprietary

基准测试表现

基准Claude 3 HaikuClaude 3 Sonnet胜出
ARC94.394.8B
BBH (BIG-Bench Hard)75.776.1Tie
GPQA44.435.9A
GSM8K (Grade School Math 8K)82.284.0B
HumanEval69.474.5B
IFEval70.874.3B
MATH52.242.4A
MMLU (Massive Multitask Language Understanding)77.981.5B
MUSR58.164.1B
WinoGrande84.883.8A

定价对比

输入输出缓存读取缓存写入
— / —— / —— / —— / —

每百万 token — A / B

优势 & 劣势

Claude 3 Haiku

  • ✅ 可靠的通用模型。
  • ⚠️ 闭源专有模型，不支持自托管。

Claude 3 Sonnet

  • ✅ MMLU 得分 81.5，知识推理能力强。
  • ✅ 支持文本、图像、音频多模态输入。
  • ✅ 上下文窗口 200K，支持长文本。
  • ⚠️ 闭源专有模型，不支持自托管。

编辑点评

Claude 3 Haiku 与 Claude 3 Sonnet 各有侧重。建议根据具体场景（代码、长文本、视觉等）选择，参考上方基准与定价表。

常见问题

哪个模型在代码任务上更优？

参考 HumanEval 基准得分表，得分更高者更适合代码任务。

哪个模型价格更低？

参考上方的定价对比表，输入/输出价格更低者更具成本优势。

上下文窗口哪个更长？

参考核心规格对比表，上下文窗口更大的模型适合长文档处理。

参考文献

编辑点评

See Editor's Take section.