桌面
添加运营动脉到电脑桌面
安装后将用独立窗口打开,并可在电脑桌面快捷访问
足迹
浏览记录
加载中...
查看更多

WorkBuddy进阶怎么用?懂5个原理,指令才不会白写

作者:萤火报告 2026-11-12 11:11 3
广告

本文拆解:《2026WorkBuddy进阶手册-犀流沙》 · 共 480 页 · 原文

很多人用 WorkBuddy进阶 停在「会用」这一层:能问、能答、能出稿。但一遇到输出跑偏、格式不对、长文后半段崩掉,就开始怀疑模型不行。

有个判断值得先记住:80% 以上的输出问题是指令问题,不是模型问题。

为什么?因为指令有歧义时,模型的不同注意力头会「看到」不同的含义,输出自然偏离预期。要解决这件事,得先知道模型在底层是怎么处理的。

一、WorkBuddy进阶第一课:Token 是怎么算的

所有大模型 API 都按 Token 计费,上下文窗口也用 Token 计量。所以第一件要搞清的事就是 Token 是什么。

Token 不是字,也不是词,是模型切分文本的最小单位。「Hello, World!」会被拆成「Hello」「,」「World」「!」;

「你好世界」可能拆成「你好」「世界」,两到四个 Token 取决于模型。

关键发现有两条。

第一条,中文的 Token 效率比英文低约 30% 到 50%。同一内容的中文版本需要约英文版两倍的 Token。这意味着用中文对话比英文更贵,中文内容也更快消耗上下文窗口。

第二条,模型之间的差异不小。Qwen3 在中文脚本上做到约 0.3 Token 每字符,GPT-5.5 约 0.5,差出 40% 的成本。

WorkBuddy进阶第一课:Token是怎么算的配图

来源:运营动脉文库《2026WorkBuddy进阶手册-犀流沙》

知道这两条,你就能算清每次调用的真实成本,而不是月底被账单吓一跳。

二、WorkBuddy的温度参数到底控制什么

第二个高频误区是把温度当成「聪明程度」的调节。它不控制能力,只控制随机性。

温度作用在 Softmax 之前,通过缩放 logits 改变概率分布形状:低温让分布更尖锐(更倾向选最高概率的词),高温让分布更平缓(给低概率词更多机会)。

另外两个参数也常用。Top-K 是固定保留概率最高的 K 个候选,缺点是不随置信度调整——模型很自信时 K=50 会引入大量噪声,模型不确定时 K=50 又会截断好选项。

Top-P 是保留最小候选集合,使其累计概率超过阈值 p,能自适应分布形状,所以成为多数生产系统的默认策略。

实操建议可以按任务直接套:

代码和事实性任务,温度 0.0 到 0.3、Top-P 0.9;日常聊天和内容 0.5 到 0.7、Top-P 0.9 到 0.95;

创意写作和头脑风暴 0.8 到 1.0、Top-P 0.95。

温度别超过 1.5,幻觉风险极高。还有一条经验:Claude 对温度不敏感,Gemini 对温度敏感。

调参的原则是从低温开始往上试。先设 0.0 看输出是否够用,不行再逐步调到 0.3、0.5、0.7,每次测 5 到 10 次,一旦出现幻觉或不稳定就退回上一个值。

这类拆解运营动脉(www.yydm.cn)上还有不少,站内 7 万+ 份方案、报告和课件,每月更新一千多份,搜关键词基本都能找到。

三、上下文越大越好?这是个代价很高的错觉

现在动辄百万 Token 的上下文窗口,很容易让人把所有资料都塞进去。但这里有三笔账要算。

第一笔是注意力质量。200K 的窗口不代表模型对 20 万个 Token 给予同等关注,对于超过约 5 万 Token 的文档,推理质量会下降。

第二笔是「Lost in the Middle」效应。斯坦福 2023 年的研究发现,Transformer 注意力会系统性低估长上下文中间的信息。

对超过约 2000 Token 的提示,模型对开头和结尾关注更多,中间容易被忽视。

第三笔是计算成本。自注意力的复杂度是 O(n²),Token 数量翻倍、计算量翻四倍。

WorkBuddy进阶要点配图:上下文越大越好?这是个代价很高的错觉

来源:运营动脉文库《2026WorkBuddy进阶手册-犀流沙》

对应的做法很具体:最重要的指令放开头(系统提示、角色定义、核心约束),次要上下文放中间,关键约束在结尾再重复一次。

文档按长度分档处理:1 万 Token 以内的直接贴;1 万到 5 万的分章节处理、提取关键信息再汇总;超过 5 万用 RAG 分块检索,别硬塞。

多轮对话每 10 到 15 轮做一次摘要,用摘要替代历史。

四、模型怎么选:四条判断就够了

选型的第一个原则是别听人推荐,按任务特征匹配。

代码和 Agent 场景首推 Claude Opus 4.7,它在 SWE-bench 上达到 64.3%,缺点是价格昂贵、多模态能力弱于 Gemini。

数学推理看 DeepSeek V4-Pro,MATH-500 上 96.8%,性价比高、支持私有化部署,代价是日常对话体验一般、响应较慢。

中文场景看 GLM-5.1 和 Qwen3-Max,两者在 SuperCLUE 中文评测中都超过 71.5 分。

长文档和日常开发看 GPT-5.5,综合能力第一、生态最完善,但国内访问受限、有数据隐私风险。

选之前先过四个约束:数据是否必须留境内(要就选国产)、是否要私有化部署(要就选开源的 DeepSeek 或 GLM)、预算多少、是否需要实时响应。

选完一定要用真实任务验证:测试 5 到 10 次看准确性,看相同输入的输出是否稳定,看 Token 消耗是否在预算内,看响应时间是否达标。不满意就换一个再试。

五、长文后半段崩掉,是自回归的必然

这条能解释很多「明明前面写得挺好,后面就跑偏」的情况。

模型是自回归生成的:每一步只预测下一个 Token,没有全局规划。所以写长文时它并不知道全文该往哪走,只能一步步往下接。

解决办法是在指令里提前给出结构框架。先让模型把提纲列出来、确认之后再逐节展开,比一次性要它写完整篇稳得多。

另外两个相关的现象也值得知道。模型会「一本正经地胡说八道」,因为它的目标是生成「看起来最可能的」文本,而不是「事实正确的」文本。

模型也无法可靠地做字符计数,因为 Token 边界是子词单元,精确计数不是它的原生能力。

还有个常被忽略的细节:模型不知道今天的日期。该在系统提示里插入当前日期。

六、五条检查清单,写完指令过一遍

把这些原理落成可执行的动作,就是下面五条。

指令自查:消除歧义(不说「帮我处理一下」,说「把这批 JSON 转成 CSV」)、给出 1 到 2 个输入输出示例、把隐含约束显式写出来、关键任务必须验证输出。

Token 自查:设置 max_tokens 避免输出过长、超过 10 轮对话就做摘要、系统提示保持精简。

温度自查:先确认任务类型、从低温调起、大多数任务设 Top-P 0.9 到 0.95、不同时设 Top-K 和 Top-P、不把温度当智商旋钮。

上下文自查:算清可用 Token(窗口减去系统提示再减预期输出)、关键指令放开头、关键约束在结尾重复、不在一个对话里混多个项目。

选型自查:确认是否需境内合规、是否需私有化、预算档位、延迟要求。

WorkBuddy进阶要点配图:五条检查清单,写完指令过一遍

来源:运营动脉文库《2026WorkBuddy进阶手册-犀流沙》

最后留一个反思问题:当输出不符合预期时,你首先排查的是「指令问题」还是「模型问题」?

如果答案总是后者,那大概率的真实情况是前者。懂原理的意义,就是把「和 AI 猜谜」变成「和 AI 下棋」——你知道它每一步是怎么走的,才知道该怎么出招。

如果你想把完整的原理章节、各模型的参数对照表、以及五份检查清单的原文找出来对照着用,运营动脉文库收录了这份手册的完整版,可以找来看原文。

2026WorkBuddy进阶手册-犀流沙
5分钟找到你想要的内容你想做什么去哪里找理解大模型为什么这样回答→ 底层原理/大模型原理与认知理解Agent为什么有时会犯错→ 底层原理/Agent原理与架构了解WorkBuddy能做什么、不能做什么→ 底层原理/WorkBuddy产品架构理解MCP协议是什么、怎么用→ 底层原理/MCP协议与标准化写出更好的指令→ 方法教程/提示词工程开发自定义技能→ 方法教程/技能系统开发设计自动化工作流→ 方...
480 页 20 次下载 4.01 MB
广告

声明:除非特别标注,否则均为本站原创文章,转载时请以链接形式注明文章出处。如若本站内容侵犯了原著者的合法权益,可联系本站删除。

确认删除?
会员
教程
联系
  • 站长微信
顶部