核心规格对比

规格DBRX InstructMixtral 8x22B
厂商othermistral
版本dbrx-instruct8x22b
发布日期2024-03-272024-04-10
上下文窗口32768 tokens64000 tokens
输入模态texttext
输出模态texttext
许可DBRX Open Model LicenseApache 2.0
SOC2✗✗
HIPAA✗✗
GDPR✗✗
ISO 27001✗✗

基准测试结果

基准DBRX InstructMixtral 8x22B胜出
ARC93.9—DBRX Instruct
BBH71.774.5Mixtral 8x22B
GPQA34.7—DBRX Instruct
GSM8K78.778.6DBRX Instruct
HUMANEVAL72.845.2DBRX Instruct
IFEVAL73.1—DBRX Instruct
MATH50.146DBRX Instruct
MMLU81.377.8DBRX Instruct
MUSR54.7—DBRX Instruct
WINOGRANDE81.8—DBRX Instruct

定价对比

项目 (每百万Token)DBRX InstructMixtral 8x22B
输入$0.75$1.2
输出$0.75$1.2
缓存读$0$0
缓存写$0$0

DBRX Instruct 对比 Mixtral 8x22B

模型概述

DBRX Instruct 与 Mixtral 8x22B 均为 AI 模型市场的重要选项。本页对比两者在基准、定价与合规性上的差异。

核心规格对比

厂商发布日期上下文窗口许可证
Other / Mistral2024-03-27 / 2024-04-1032K / 64KDBRX Open Model License / Apache 2.0

基准测试表现

基准DBRX InstructMixtral 8x22B胜出
ARC93.9—A
BBH (BIG-Bench Hard)71.774.5B
GPQA34.7—A
GSM8K (Grade School Math 8K)78.778.6Tie
HumanEval72.845.2A
IFEval73.1—A
MATH50.146.0A
MMLU (Massive Multitask Language Understanding)81.377.8A
MUSR54.7—A
WinoGrande81.8—A

定价对比

输入输出缓存读取缓存写入
— / —— / —— / —— / —

每百万 token — A / B

优势 & 劣势

DBRX Instruct

  • ✅ MMLU 得分 81.3,知识推理能力强。
  • ✅ 采用 MoE 混合专家架构。
  • ⚠️ 闭源专有模型,不支持自托管。

Mixtral 8x22B

  • ✅ 采用 MoE 混合专家架构。
  • ⚠️ HumanEval 45.2,代码能力较弱。
  • ⚠️ 闭源专有模型,不支持自托管。

编辑点评

DBRX Instruct 与 Mixtral 8x22B 各有侧重。建议根据具体场景(代码、长文本、视觉等)选择,参考上方基准与定价表。

常见问题

哪个模型在代码任务上更优?

参考 HumanEval 基准得分表,得分更高者更适合代码任务。

哪个模型价格更低?

参考上方的定价对比表,输入/输出价格更低者更具成本优势。

上下文窗口哪个更长?

参考核心规格对比表,上下文窗口更大的模型适合长文档处理。

参考文献

编辑点评

See Editor's Take section.