Perplexity 11 月 12 日发布 pplx-decider-v1.3(基于 Qwen3.8-27B,约 26.1B 参数)和蒸馏版 pplx-decider-flash-v1.3(基于 Qwen3.5-4B,约 4.5B),权重以 Apache 2.0 上架 Hugging Face,并通过 Decisions API 和 OpenRouter 提供。新版加入 Locate,可按标签或指令抽取原文片段并返回字符位置。官方称 v1.3 在 63 项分类任务上平均准确率 91.6%,比其生产分类器高 6.54 个百分点。

核心要点速览

  • ✓两档开源权重:v1.3 约 26.1B 参数(Qwen3.8-27B 微调),Flash v1.3 约 4.5B(Qwen3.5-4B 蒸馏),均为 Apache 2.0;BF16 本地运行约需 49 GiB 显存
  • ✓新增 Locate:按标签或指令抽取原文片段,返回起止字符位置和分数,覆盖 NER、PII 检测、抽取式问答,可与分类、打分问题放在同一请求
  • ✓官方/厂商口径分类成绩:63 项分类任务平均准确率 91.6%,比 Perplexity 生产分类器高 6.54 个百分点;7 个领域全部领先 Jev 1.14,金融领域最多高 12.9 个百分点
  • ✓检索与稳定性:72 项检索任务 nDCG@10 为 83.99,比 Qwen3-Reranker-8B 高 1.81;输入改写后答案只变 0.27%,Jev 1.14 为 2.69%–4.84%
  • ✓上手渠道:Hugging Face 下载、Perplexity Decisions API、OpenRouter(两款 v1.3 模型 11 月 19 日前免费)
Perplexity 开源决策模型 pplx-decider v1.3:新增 Locate 原文片段抽取,26B 版 63 项分类任务平均准确率 91.6%,Apache 2.0,OpenRouter 免费至 11 月 19 日
🖼️要闻配图
点击全屏高清查看
🧭

把技术选型换算成你的开发预算

40 款主流编程套餐横向比价,支持输入/输出 Token 真实账单模拟

🔬

深度技术解析与实战评估

核心背景与行业痛点

智能体系统里有大量「小决定」:请求该路由给大模型还是小模型、工具返回内容是否含提示注入、检索结果是否相关。很多团队直接让通用 LLM 生成文字答案,既慢又贵,结果还不稳定。Perplexity 的 Decider 系列走另一条路:一次前向计算直接给出每个选项的概率。这是 10 月 v1.2 之后的又一次迭代。

架构亮点与底层机制

Decider 把生成式模型的输出层裁剪成只保留 A、B、C 等选项 token 的「决策头」,在特殊标记位置读出概率;支持是/否、多选、分级打分三种题型,一个请求里可以问多道题。v1.3 把全注意力层改成双向,并采用「问题彼此隔离」的注意力布局,答案更稳定。训练分三阶段:通用全量微调、LoRA 领域强化、视觉 LoRA,再用 KL 蒸馏到 4B 小模型。新增的 Locate 用独立 adapter 和 span head 抽取原文片段,只在 Locate 请求时加载,不影响原有决策能力。

权威 Benchmark 与实测跑分对比

以下均为官方/厂商口径:63 项分类任务平均准确率 91.6%,比其生产分类器高 6.54 个百分点;72 项检索任务 nDCG@10 为 83.99,高于 Qwen3-Reranker-8B 和 Jev 1.14;8 种语言平均准确率 88.16%(Flash 86.50%,Jev 1.14 为 85.41%);抽取任务均分 69.0,高于 Liquid d1 的 43.3。在 100 万条真实 Decisions API 请求上,与前沿 LLM 评审的一致率为 93.98%(v1.2 为 93.68%)。暂无第三方复测。

开发者实战落地与开箱指南

本地使用需 Python 3.12+ 和约 49 GiB 显存,snapshot_download 拉取权重后用 pplx_decider 的 Decider.from_pretrained 加载,调用 decide() 传入 state 和 questions;fast=True 可开启打包批处理加速。注意 v1.3 的请求格式与 v1.1/v1.2 不兼容,旧 prompt 构造器不能复用。延迟和成本敏感的高并发路由选 Flash,误判代价高的评审选 26B 版,阈值建议用自己的标注集调。

实战指南准备好将技术转化为生产力?

即刻查看该技术对应模型与主流工具的实测差异,或一键测算团队 API 调用与 $20/月套餐盈亏平衡点。

接着读IBM 发布 LLM 原生标记语言 LLMON 和两款 Granite 4.1 预览模型(3B/8B):用保留 token 把指令和数据分开,OPI 间接注入测试中比最好的前沿模型多挡住 47% 的攻击
立即阅读→