核心规格对比

规格DBRX InstructMixtral 8x22B
厂商othermistral
版本dbrx-instruct8x22b
发布日期2024-03-272024-04-10
上下文窗口32768 tokens64000 tokens
输入模态texttext
输出模态texttext
许可DBRX Open Model LicenseApache 2.0
SOC2
HIPAA
GDPR
ISO 27001

基准测试结果

基准DBRX InstructMixtral 8x22B胜出
ARC93.9DBRX Instruct
BBH71.774.5Mixtral 8x22B
GPQA34.7DBRX Instruct
GSM8K78.778.6DBRX Instruct
HUMANEVAL72.845.2DBRX Instruct
IFEVAL73.1DBRX Instruct
MATH50.146DBRX Instruct
MMLU81.377.8DBRX Instruct
MUSR54.7DBRX Instruct
WINOGRANDE81.8DBRX Instruct

定价对比

项目 (每百万Token)DBRX InstructMixtral 8x22B
输入$0.75$1.2
输出$0.75$1.2
缓存读$0$0
缓存写$0$0

DBRX Instruct 对比 Mixtral 8x22B

模型概述

DBRX Instruct 与 Mixtral 8x22B 均为 AI 模型市场的重要选项。本页对比两者在基准、定价与合规性上的差异。

核心规格对比

厂商发布日期上下文窗口许可证
Other / Mistral2024-03-27 / 2024-04-1032K / 64KDBRX Open Model License / Apache 2.0

基准测试表现

基准DBRX InstructMixtral 8x22B胜出
ARC93.9A
BBH (BIG-Bench Hard)71.774.5B
GPQA34.7A
GSM8K (Grade School Math 8K)78.778.6Tie
HumanEval72.845.2A
IFEval73.1A
MATH50.146.0A
MMLU (Massive Multitask Language Understanding)81.377.8A
MUSR54.7A
WinoGrande81.8A

定价对比

输入输出缓存读取缓存写入
— / —— / —— / —— / —

每百万 token — A / B

优势 & 劣势

DBRX Instruct

  • ✅ MMLU 得分 81.3,知识推理能力强。
  • ✅ 采用 MoE 混合专家架构。
  • ⚠️ 闭源专有模型,不支持自托管。

Mixtral 8x22B

  • ✅ 采用 MoE 混合专家架构。
  • ⚠️ HumanEval 45.2,代码能力较弱。
  • ⚠️ 闭源专有模型,不支持自托管。

编辑点评

DBRX Instruct 与 Mixtral 8x22B 各有侧重。建议根据具体场景(代码、长文本、视觉等)选择,参考上方基准与定价表。

常见问题

哪个模型在代码任务上更优?

参考 HumanEval 基准得分表,得分更高者更适合代码任务。

哪个模型价格更低?

参考上方的定价对比表,输入/输出价格更低者更具成本优势。

上下文窗口哪个更长?

参考核心规格对比表,上下文窗口更大的模型适合长文档处理。

参考文献

编辑点评

See Editor's Take section.