decision.host
首页 / 评估 / VAST

VAST

Decision Index 语言理解 111 个模型参评

Says whether a comment is for, against, or neutral on a given topic.

评估集信息

所属套件
Decision Index
分组
语言理解
决策类型
混合(Choice / Noul / Score)
样本量
3,006 个 case
主指标
macro-F1
优化方向
越高越好
参评模型
111 个
最佳分
82.0
平均分
50.2
所属领域
语言理解(权重 0.2585)
上游数据集
VAST
数据许可证
见上游原始数据集

这个评估集测什么

Says whether a comment is for, against, or neutral on a given topic.

在该评估集上的模型成绩(111 个)

#模型得分 对比其他指标模态官方链接
1 torchcast-decision-27b(Based:Startlux)
Torchcast AI · Decision Index
82.0 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
2 ezjev 4B s2
· Decision Index
77.6 文本 Decision Index 排行榜 ↗
3 Quyet-1.0-Large
社区 · Decision Index
77.6 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
4 Blink v0.3 26B-A4B (NVFP4)
Pixilab.ai · Decision Index
77.1 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
5 LiquidAI d1-3B
Liquid AI · Decision Index
77.0 文本 Decision Index 排行榜 ↗
6 Perplexity Decider v1.1 (27B)
Perplexity · Decision Index
76.7 图像 Hugging Face 权重 ↗ 官方文档 ↗
7 Surogate Rune 26B-A4B v3
Surogate · Decision Index
76.6 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
8 Decider chat · Gemma-4-31B
· Decision Index
73.2 文本 Decision Index 排行榜 ↗
9 Bespoke Nimble 9B
Bespoke Labs · Decision Index
73.1 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
10 simple-jev · Qwen3.8-27B (featherless)
· Decision Index
71.8 文本 Decision Index 排行榜 ↗
11 Eikos 27B
社区 · Decision Index
71.3 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
12 Fastino GLiDE no-thinking (28B)
Fastino · Decision Index
69.6 文本 Decision Index 排行榜 ↗
13 Solomon v1.1 (27B)
Doccy Health · Decision Index
69.4 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
14 deck31b (Gemma 4 31B)
· Decision Index
69.0 文本 Decision Index 排行榜 ↗
15 Winnow 12B
EldanRing · Decision Index
68.6 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
16 Kev 27B
Jared Palmer · Decision Index
68.3 文本 代码仓库 ↗ HF · 4B ↗
17 JPT-35B-A3B
社区 · Decision Index
68.3 文本 HF · 9B ↗ Hugging Face 权重 ↗
18 Hopper 12B (trained)
HopitAI · Decision Index
67.2 文本 Decision Index 排行榜 ↗
19 Xor 1.2 / Xor 26B-A4B
Juspay Technologies · Decision Index
65.0 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
20 Jev 1.13
TypeSafe AI · Decision Index
64.6 文本 官网 ↗ 官方文档 ↗
21 djev diffgemma
· Decision Index
64.6 文本 Decision Index 排行榜 ↗
22 JPT-9B Qwen3.5-9B LoRA
社区 · Decision Index
64.4 图像 HF · 9B ↗ Hugging Face 权重 ↗
23 frontier-infra Jebadiah 27B
Frontier Infra · Decision Index
63.9 文本 HF · 9B ↗ Hugging Face 权重 ↗
24 JPT-4B Qwen3.5-4B LoRA
社区 · Decision Index
63.4 文本 HF · 9B ↗ Hugging Face 权重 ↗
25 Winnow-E4B
EldanRing · Decision Index
63.1 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
26 JADE
· Decision Index
62.6 文本 Decision Index 排行榜 ↗
27 Dinah-0
· Decision Index
62.5 文本 Decision Index 排行榜 ↗
28 GEV-26B-Decide
AutoTrust AI Lab · Decision Index
60.9 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
29 mmastrac diffgemma
· Decision Index
60.9 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
30 Jevfire Qwen3.8-27B
· Decision Index
60.8 文本 Decision Index 排行榜 ↗
31 reflex Qwen3.8-27B-FP8 (wide choice)
· Decision Index
60.5 文本 Decision Index 排行榜 ↗
32 vLLM-SR Decision 2.0 Vega 27B
vLLM Semantic Router · Decision Index
59.9 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
33 Clef
Cloudflare · Decision Index
59.3 图像 Hugging Face 权重 ↗ 官方博客 ↗
34 razorback16 diffgemma
· Decision Index
59.2 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
35 Decider chat · Qwen3.6-27B
· Decision Index
58.4 文本 Decision Index 排行榜 ↗
36 jaredpalmer/kev-9b
Jared Palmer · Decision Index
56.7 文本 代码仓库 ↗ HF · 4B ↗
37 AJev lora5 (Gemma 4 12B)
· Decision Index
56.6 文本 Decision Index 排行榜 ↗
38 JoshuaSP diffgemma
· Decision Index
55.7 文本 Decision Index 排行榜 ↗
39 JEV-27B
AutoTrust AI Lab · Decision Index
54.8 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
40 Jev-Omni (12B)
社区 · Decision Index
54.6 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
41 decider-35b-a3b
Mapika · Decision Index
54.5 文本 Hugging Face 权重 ↗ 代码仓库 ↗
42 Decider 4B
Mapika · Decision Index
53.5 文本 Hugging Face 权重 ↗ 代码仓库 ↗
43 Kas 4B
· Decision Index
52.8 文本 Decision Index 排行榜 ↗
44 Kev 4B r10
Jared Palmer · Decision Index
52.4 文本 代码仓库 ↗ HF · 4B ↗
45 Sieve 9B
Sthānika AI · Decision Index
52.2 文本 Decision Index 排行榜 ↗
46 vLLM-SR Decision 2.0 Nox 4B
vLLM Semantic Router · Decision Index
52.2 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
47 Decider 2B
Mapika · Decision Index
51.0 文本 Hugging Face 权重 ↗ 代码仓库 ↗
48 RSI-Jev v5.0 VL 3B
社区 · Decision Index
50.8 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
49 FLock this-that 1.2
FLock.io · Decision Index
50.0 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
50 Clef-flash
Cloudflare · Decision Index
49.6 图像 Hugging Face 权重 ↗ 官方文档 ↗
51 decisio 0.4.0 (Qwen3.6-35B-A3B)
· Decision Index
49.0 文本 Decision Index 排行榜 ↗
52 JevK5
社区(alibiserikbay) · Decision Index
48.7 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
53 Interfaze lev Qwen3.5-4B LoRA
Interfaze · Decision Index
48.4 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
54 Sifr 0.8B v3.1
· Decision Index
48.0 文本 Decision Index 排行榜 ↗
55 Jet v6.2 Qwen3.5-4B LoRA
· Decision Index
47.9 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
56 Together Tev1 Qwen3.5-4B
Together AI · Decision Index
47.7 文本 Hugging Face 权重 ↗ 代码仓库 ↗
57 Jev-Style 2B v3
· Decision Index
47.6 文本 Decision Index 排行榜 ↗
58 NeoHorse Jev 4B
TokenRhythm · Decision Index
47.4 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
59 Lev1 3.7B
· Decision Index
46.5 文本 Decision Index 排行榜 ↗
60 jiwo 4B
· Decision Index
46.0 文本 Decision Index 排行榜 ↗
61 vLLM-SR Decision 2.0 Sol 2B
vLLM Semantic Router · Decision Index
45.0 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
62 vLLM-SR Decision 2.0 Lux 9B
vLLM Semantic Router · Decision Index
44.7 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
63 Together Tev1 Qwen3.5-0.8B
Together AI · Decision Index
44.6 文本 Hugging Face 权重 ↗ 代码仓库 ↗
64 Hopper (G) 1.2 Qwen3.5-4B LoRA
HopitAI · Decision Index
44.3 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
65 JPT-0.8B Qwen3.5-0.8B LoRA
社区 · Decision Index
44.0 文本 HF · 9B ↗ Hugging Face 权重 ↗
66 SemIf Qwen3.5-4B Base
· Decision Index
44.0 文本 Decision Index 排行榜 ↗
67 Kodiak v0.2 1B (accuracy)
Cortex Agent LLC · Decision Index
43.9 文本 Decision Index 排行榜 ↗
68 Ryotide Qwen v0.3.1
· Decision Index
43.8 文本 Decision Index 排行榜 ↗
69 Jevstral 8B
· Decision Index
43.7 文本 Decision Index 排行榜 ↗
70 Jobe Qwen3.5-4B
· Decision Index
43.7 文本 Decision Index 排行榜 ↗
71 EXAONE-4.0-1.2B-JEV v0.3
· Decision Index
43.6 文本 Decision Index 排行榜 ↗
72 jev-smol(参考实现)
DanielMcSheehy · Decision Index
43.1 图像 代码仓库 ↗ Hugging Face 权重 ↗
73 Metask 4B
wayfind · Decision Index
43.0 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
74 vLLM-SR Decision 2.0 Eos 0.8B
vLLM Semantic Router · Decision Index
42.6 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
75 bekko-system-one-v0-400m
hotchpotch · Decision Index
42.5 文本 HF · 400M ↗ HF · 17M ↗
76 openvons Qwen3-4B
· Decision Index
42.5 文本 Decision Index 排行榜 ↗
77 JEV-9B
AutoTrust AI Lab · Decision Index
42.3 文本 Decision Index 排行榜 ↗
78 Sieve 2B
Sthānika AI · Decision Index
41.5 文本 Decision Index 排行榜 ↗
79 InternLM Intern-Decision Qwen3.5-4B
Intern Large Model · Decision Index
40.7 图像 Hugging Face 权重 ↗ 代码仓库 ↗
80 Kev 0.8B r15
Jared Palmer · Decision Index
40.6 文本 代码仓库 ↗ HF · 4B ↗
81 convaiinnovations/laya-typed-decisions
Convai Innovations · Decision Index
40.5 文本 Hugging Face 权重 ↗ HF · 多语言 ↗
82 GLiFormer Jeff large v1
knowledgator · Decision Index
40.5 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
83 Strands Decider 2B
Mapika · Decision Index
40.4 文本 Hugging Face 权重 ↗ 代码仓库 ↗
84 Gevva E4B
· Decision Index
39.9 文本 Decision Index 排行榜 ↗
85 bekko-system-one-v0-17m
hotchpotch · Decision Index
39.8 文本 HF · 400M ↗ HF · 17M ↗
86 Intelif Qwen3-4B
· Decision Index
39.4 文本 Decision Index 排行榜 ↗
87 InternLM Intern-Decision Qwen3.5-2B
Intern Large Model · Decision Index
39.3 文本 Hugging Face 权重 ↗ 代码仓库 ↗
88 LiquidAI d1-omni-600M
Liquid AI · Decision Index
38.8 文本 Decision Index 排行榜 ↗
89 jiwo 0.8B
· Decision Index
38.5 文本 Decision Index 排行榜 ↗
90 open-jev (pngwn)
Zefan Cai · Decision Index
38.3 文本 HF · 9B ↗ HF · 27B ↗
91 JevK5 Lite
· Decision Index
38.2 文本 Decision Index 排行榜 ↗
92 von 1.3
wfzyx · Decision Index
37.4 文本 Hugging Face 权重 ↗ 代码仓库 ↗
93 Gevva E2B
· Decision Index
37.4 文本 Decision Index 排行榜 ↗
94 Bosun v3.1 1.7B
Hanno-Labs · Decision Index
36.4 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
95 LFM2.5-2.6B-RLCD
· Decision Index
36.3 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
96 GLiNER2.5-Decide
Fastino Labs · Decision Index
35.3 文本 systemonemodels.org ↗ Hugging Face 权重 ↗
97 MoganAI Lavoir ModernBERT-large
Mogan AI · Decision Index
35.1 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
98 system-one-gemma
· Decision Index
34.9 文本 Decision Index 排行榜 ↗
99 vLLM-SR Decision 2.0 Kai 0.6B
vLLM Semantic Router · Decision Index
34.2 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
100 OneJev 0.8B
OmniJev · Decision Index
33.7 图像 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
101 Jev-Style 0.8B v3
· Decision Index
33.5 文本 Decision Index 排行榜 ↗
102 verdict-small
Manav2op · Decision Index
33.4 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
103 Supersonic Labs Julia 1
Supersonic Labs · Decision Index
32.9 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
104 bekko-system-one-v0-68m
hotchpotch · Decision Index
32.5 文本 HF · 400M ↗ HF · 17M ↗
105 Qwen-2.5-1B-RLCD
· Decision Index
31.4 文本 Decision Index 排行榜 ↗
106 InternLM Intern-Decision Qwen3.5-0.8B
Intern Large Model · Decision Index
28.0 文本 Hugging Face 权重 ↗ 代码仓库 ↗
107 bosun-v3.1-0.6b
Hanno-Labs · Decision Index
26.3 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
108 LFM2.5-350M-RLCD
· Decision Index
25.3 文本 Hugging Face 权重 ↗ Decision Index 排行榜 ↗
109 DM-JEPA 1.1
Danger Labs · Decision Index
24.7 文本 Decision Index 排行榜 ↗
110 CLM-8B
Contrastive-LM · Decision Index
22.7 文本 systemonemodels.org ↗ Hugging Face 权重 ↗
111 Zev
· Decision Index
16.9 文本 Decision Index 排行榜 ↗