Skip to main content
阅读1,543 6 分钟阅读

阅读日报 · 2026-08-24

作者

阅读清单

📚 今日阅读清单

2026-08-24 · 共 8 篇


🤖 AI 编程

1. 如何构建一套可持续维护的评估集 / How to Build an Eval Set You Can Maintain

本文回答"已有 traces,如何搭建 evals"这一问题:先用错误分析(error analysis)从真实失败中挖掘候选指标,再区分一次性修复与泛化问题、把每个指标绑定到一个具体决策、并考虑评估器的运行成本,从而筛选出值得长期维护的指标集。指标分三类:目标指标、护栏(guardrails)指标与运营指标,在保证可见性的前提下越少越好。最后通过定期重跑错误分析、退役失效指标、防止 Goodhart 定律式的过拟合,让指标集保持鲜活。

🔗 查看原文 — x.com

2. 软件工厂需要更快的评审循环:进一步优化从 PR 到合并的路径 / The Software Factory Needs a Faster Review Loop: Further Optimizing the Path from PR to Merge

在 AI 原生的工程组织中,生成代码已不再是交付软件最慢的环节,评审、验证、修复与人工决策才是瓶颈。独立的 AI 编码工具或许能带来 30–40% 的提速,但要在吞吐量上实现阶跃式提升,必须优化代码写完之后的一切环节。Augment 把此前 3 倍代码产出的评审系统扩展为完整的 PR 到合并循环:多个专职 Agent(风险分析、逐行评审、修复、运行时验证等)持续处理机械性交接工作,人类提供判断与知识传递并保留最终合并决策权。这就是循环工程(loop engineering):改进把生成代码转化为已验证、可合并变更的完整系统,而不是孤立优化某个单一工具。

🔗 查看原文 — x.com

3. 编写优秀的评估器 / Writing Good Evaluators

如何编写可信的评估器:能用确定性代码评估器(快、便宜、结论稳定)就优先用代码;评估器要细粒度,每种失败模式一个二元或分类评判,而不是综合打分的"上帝评估器";输入应衡量环境中的实际结果而非对话中的声明。写 LLM-as-a-judge 提示词前先标注 10-20 个真实案例,提示词按背景、精确标准、标注示例、先推理后结论、留出 "unknown" 出口来组织;最后用标注案例校准评判器,上线后持续抽样复核其结论。

🔗 查看原文 — langfuse.com


🧭 战略与协作

4. 既要 AI-Native,也要 AI-Proof / Be AI-Native and AI-Proof

在 AI 时代,仅靠"更好的智能"与"行政自动化"的价值主张会随前沿模型进步而不断失守,价值正转向"智能 + 自动化 + 问责"。问责所需的执照、监管、线下运营与风险承担能力位于模型层之外,前沿模型公司既无暇也无意包揽。文中给出三类既高度 AI-Native 又 AI-Proof 的医疗健康产品形态:提供诊疗与线下服务、承担财务风险、开发受 FDA 监管的产品。

🔗 查看原文 — x.com

5. 让智能支出恰到好处 / Right-Sizing Your Intelligence Spend

前沿模型的智能已突飞猛进,但经济中大多数工作(理赔、护理、物流)需要的不是发现未知,而是在组织已知范围内做出正确决策。每个工作负载都有智能门槛:跨过之后瓶颈转为上下文与执行,边际推理 token 的价值可能趋近于零。实验室靠多卖智能取胜,企业靠少用智能取胜,双方激励根本冲突。未来将是海量路由器与网关、混合工作负载默认化:困难新颖的部分交给前沿模型,简单、重复、私有的部分留在本地。进步的衡量标准是每次成功结果所消耗的智能趋近于零。

🔗 查看原文 — x.com


📦 产品与设计

6. Mole 出 Mac 版后,用户教会了我做产品 / What Users Taught Me About Building a Product

Tw93 回顾把开源 CLI 工具 Mole 做成 Mac 付费软件的三个月:AI 时代磁盘被编译产物、工具旧版本和模型文件撑爆,清理工具最核心的决策是"不删什么"——模型与 AI 会话记录写死保护、删前逐项确认、宁可漏删不误删。而最大的产品收获几乎全部来自用户邮件:默认摄氏度、浅色模式也是无障碍需求、定价数字影响信任感。他坚持手工回邮件(退款率低于 0.8%),认为代码能力只占做产品的三成,"不做什么"远比"做什么"重要。

🔗 查看原文 — x.com


🌱 职场与个人成长

7. 成为更好作家的黄金法则 / The Golden Rule for Becoming a Better Writer

成为更好作家的唯一黄金法则:尽可能多读,读得广、读得好。作者认为写作没有统一蓝图,但阅读无可替代——每本书都在教写作技法,类型之外的阅读带来源源不断的灵感,并重塑大脑的专注力与想象力;而数字成瘾会摧毁阅读型大脑,阅读所需的持续专注恰是写作的根基。想写作却称"太忙没时间读书"的人,应放下手机每晚读一小时书,几周即可重塑大脑、练出写作耐力。

🔗 查看原文 — nappertime.com


📥 其他

8. 新到手的 Linux 服务器,我这样设置 / How I Set Up a New Linux Server

一篇个人向的 Linux 服务器初始化 SOP:先用 YABS 脚本"验牌",核对 CPU、磁盘与带宽是否与服务商承诺一致;再通过一键 DD 脚本或自定义 ISO 重装纯净系统;随后创建非特权用户并配置 sudo、更新系统安装基础软件,最后完成 SSH 加固、Fail2ban 与 nftables 防火墙设置。适合作为快速部署环境的速查手册。

🔗 查看原文 — blog.dejavu.moe

Will lao

作者

Will lao

Coder, traveler, photographer.

标签#reading