Benchmarks

金融

Finance Agent v2

像金融分析师一样查财报、核对数据,并完成多步分析与计算

它测什么

Finance Agent v2 是 Vals AI 的金融 Agent 评测,考察模型能否完成初级金融分析师日常的研究工作。它不是金融知识选择题:模型需要自己查找上市公司公告和财报,把多个来源的信息连起来,再给出有依据的答案。

比如让 AI 比较两家公司的库存周转效率,它要找到相应年份的库存和成本数据,核对单位与计算口径,再算出谁的库存周转更快。只抄出一个数字不够,数据来源、计算过程和结论都要经得起检查。

题目覆盖财报业绩、市场分析、可比公司、并购交易、会计调整、信息披露和财务建模等九类任务。全部数据集有 927 道专家审核题,其中公开样例 27 道、私有验证集 450 道、隐藏测试集 450 道;这里的成绩只来自隐藏测试集。

所有模型使用统一的工具环境,可以检索 SEC 文件、搜索网页、解析文档、提取信息、使用计算器和查询历史价格,每题限时两小时。每个模型运行三轮,成绩取各轮均值,因此反映的是模型与这套工具环境共同完成金融研究的能力。

怎么看分数

默认按 Partial Credit(部分得分)排序:每道题由多项带权重的检查组成,只要任一关键项(dealbreaker)失败,该题就记零分;关键项正确、其他项有遗漏时可以获得部分分数。比如收入数字是关键项,数字错了,即使解释写得再完整也不能得分;数字正确但漏掉一项次要解释,则可能获得部分分数。All-Pass(全部通过率)更严格,只有一题的所有检查都通过才算成功,所以两列不能相加,部分得分 60% 也不代表完整答对了 60% 的题。评分由 GPT-5.4、Gemini 3.1 Pro 和 Claude Sonnet 4.6 组成的三模型评审团完成。收录官方标注 2026 年 9 月 11 日更新的 v2 榜单全部 60 条结果,保留公布的推理设置;不与 v1.1 混排。官网提供的是三轮均值的标准误,并非 95% 置信区间,本表不将其标成置信区间。

来源Vals AI

模型表现

核对于 60 条成绩

Finance Agent v2 — 模型表现。选择列标题可排序。
Gemini 3.8 Flash (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v261.4%49.7%
Muse Spark 1.2 (xhigh)MetaAgent · Vals Finance Agent v2
Vals Finance Agent v260.6%50.9%
Muse Spark 1.3 Max (max)MetaAgent · Vals Finance Agent v2
Vals Finance Agent v260.0%49.5%
Gemini 3.7 Flash (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v259.0%47.5%
Muse Spark 1.3 (xhigh)MetaAgent · Vals Finance Agent v2
Vals Finance Agent v258.9%48.7%
Claude Fable 5.1 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v258.9%47.8%
Claude Opus 5 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v258.6%147.7%
Gemini 3.5 Flash (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v257.9%45.7%
GLM-5.3 Flash (max)Z AIAgent · Vals Finance Agent v2
Vals Finance Agent v257.9%46.3%
Muse Spark 1.1 (xhigh)MetaAgent · Vals Finance Agent v2
Vals Finance Agent v257.2%44.9%
Claude Fable 5 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v256.3%45.7%
Gemini 3.6 Flash (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v256.3%44.6%
GLM-5.3 (max)Z AIAgent · Vals Finance Agent v2
Vals Finance Agent v255.8%44.9%
GPT-5.6 Luna (max)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v255.0%43.3%
GPT-5.6 Terra (max)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v254.4%42.8%
Kimi K3Moonshot AIAgent · Vals Finance Agent v2
Vals Finance Agent v254.4%41.7%
Claude Opus 4.8 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v253.9%43.5%
Claude Sonnet 5 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v253.9%42.1%
GPT-5.6 Sol (max)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v253.8%41.4%
Grok 4.6 (high)xAIAgent · Vals Finance Agent v2
Vals Finance Agent v253.7%42.9%
GPT-6 Astra (max)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v253.5%40.3%
DeepSeek V4.1 Flash (high)DeepSeekAgent · Vals Finance Agent v2
Vals Finance Agent v253.5%41.1%
GPT-5.5 (xhigh)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v251.8%39.6%
Claude Opus 4.7 (high)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v251.5%38.6%
Claude Sonnet 4.6 (max)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v251.0%38.8%
Qwen 3.8 MaxAlibabaAgent · Vals Finance Agent v2
Vals Finance Agent v250.6%38.2%
DeepSeek V4 Pro 0813 (max)DeepSeekAgent · Vals Finance Agent v2
Vals Finance Agent v250.4%38.5%
GLM-5.2Z AIAgent · Vals Finance Agent v2
Vals Finance Agent v249.7%38.0%
DeepSeek V4 Flash 0731 (high)DeepSeekAgent · Vals Finance Agent v2
Vals Finance Agent v249.5%36.8%
Qwen 3.8 27B (xhigh)AlibabaAgent · Vals Finance Agent v2
Vals Finance Agent v248.6%36.8%
Grok 4.5 (high)xAIAgent · Vals Finance Agent v2
Vals Finance Agent v248.3%36.7%
MiniMax-M3MiniMaxAgent · Vals Finance Agent v2
Vals Finance Agent v248.3%36.7%
Qwen 3.7 MaxAlibabaAgent · Vals Finance Agent v2
Vals Finance Agent v247.8%34.6%
Gemini 3.5 Flash Lite (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v247.4%35.3%
Inkling (0.99)Thinking MachinesAgent · Vals Finance Agent v2
Vals Finance Agent v246.6%33.4%
GPT 5.4 Mini (xhigh)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v245.4%32.4%
Kimi K2.6Moonshot AIAgent · Vals Finance Agent v2
Vals Finance Agent v244.9%32.6%
GLM 5.1Z AIAgent · Vals Finance Agent v2
Vals Finance Agent v244.8%32.7%
DeepSeek V4 Pro (max)DeepSeekAgent · Vals Finance Agent v2
Vals Finance Agent v244.1%31.4%
Gemini 3.1 Pro Preview (02/26) (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v243.0%30.9%
Gemini 3 Flash (12/25) (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v242.6%30.2%
MiMo V2.5 ProXiaomiAgent · Vals Finance Agent v2
Vals Finance Agent v241.5%28.8%
Inkling Small (0.99)Thinking MachinesAgent · Vals Finance Agent v2
Vals Finance Agent v241.3%29.2%
Qwen 3.6 PlusAlibabaAgent · Vals Finance Agent v2
Vals Finance Agent v240.8%29.4%
Qwen 3.7 PlusAlibabaAgent · Vals Finance Agent v2
Vals Finance Agent v238.2%25.8%
GPT 5.4 Nano (high)OpenAIAgent · Vals Finance Agent v2
Vals Finance Agent v238.2%26.0%
Grok 4.3 (high)xAIAgent · Vals Finance Agent v2
Vals Finance Agent v237.7%26.4%
Nemotron 3 UltraNVIDIAAgent · Vals Finance Agent v2
Vals Finance Agent v237.7%24.8%
MiMo V2.5XiaomiAgent · Vals Finance Agent v2
Vals Finance Agent v236.7%23.8%
Kimi K2.5Moonshot AIAgent · Vals Finance Agent v2
Vals Finance Agent v235.8%23.8%
Mistral Medium 3.5 (high)MistralAgent · Vals Finance Agent v2
Vals Finance Agent v232.1%21.6%
Claude Haiku 4.5 (Thinking)AnthropicAgent · Vals Finance Agent v2
Vals Finance Agent v231.0%19.8%
Ling 3.0 FlashAnt GroupAgent · Vals Finance Agent v2
Vals Finance Agent v230.3%19.6%
Gemini 3.1 Flash Lite Preview (high)GoogleAgent · Vals Finance Agent v2
Vals Finance Agent v230.0%19.3%
Grok 4.20 (Reasoning)xAIAgent · Vals Finance Agent v2
Vals Finance Agent v228.5%17.5%
MiniMax-M2.7MiniMaxAgent · Vals Finance Agent v2
Vals Finance Agent v227.9%17.1%
Laguna M.1PoolsideAgent · Vals Finance Agent v2
Vals Finance Agent v225.0%14.4%
Mercury 2.5 (high)InceptionAgent · Vals Finance Agent v2
Vals Finance Agent v218.6%9.1%
Nemotron 3.5 LightningNVIDIAAgent · Vals Finance Agent v2
Vals Finance Agent v218.5%10.3%
Laguna XS.2PoolsideAgent · Vals Finance Agent v2
Vals Finance Agent v215.6%6.8%
  1. Vals AI 披露:1,350 次运行题目结果中有一次使用 Claude Opus 4.8 作为拒答后的备用模型;该题本就为零分,因此公布成绩未受影响。来源

⌘K搜索知识库

最近收录

正在载入知识索引…