过滤器与描述
对提醒质量影响最大的手段就是监控器描述。它是我们的 LLM 用来决定某个变更是否具有意义的提示词 (prompt) — 因此,请像为团队成员做简报一样来撰写它。
优秀描述的剖析
一个有用的描述通常包含三个部分:
- 该页面是什么。 “竞争对手定价页面”、“我们的文档变更日志”、“数据团队的招聘公告板”。
- 您想了解的内容。 “计划价格或配额的变更”、“新版本发布”、“新开放的职位”。
- 您希望忽略的内容。 “忽略文案编辑和设计变更”、“忽略‘X 分钟前’这种时间戳”。
行之有效的示例
竞争对手定价:
Pricing page for competitor X. Alert me when: - any plan price changes - a plan is added or removed - quotas / limits change (seats, API calls, storage) Ignore copy tweaks, A/B testing layouts, and rotating testimonials.
产品变更日志:
Public changelog for our biggest competitor. Alert me when a new release entry is added. Ignore typo fixes to old entries. The summary should mention the feature name and one-sentence pitch.
招聘公告板:
Engineering careers page for the company. Alert me when a new senior or staff-level role is posted. Ignore non-engineering roles and re-postings of existing listings.
无效的示例
- 过于模糊。 “当这里发生变更时告诉我” — 您将收到包括网页样板内容 (boilerplate) 在内的所有差异提醒。
- 过于狭隘。 “仅当企业版计划的价格从 $499 发生变动时提醒我” — 这只能生效一次,之后您的监控器就失效了。请描述变更的种类,而不是一个具体的数值。
- 自相矛盾。 “任何变更都要提醒,但忽略微小的更改” — 请明确说明“微小”的含义。
迭代优化监控器
您可以随时编辑监控器的描述。新的描述将应用于下一次检查,不具有追溯力。如果您持续收到噪音提醒:
- 打开提醒并查看差异对比 (diff)。摘要会告诉您 LLM 认为什么是具有意义的。
- 针对产生噪音的模式添加一个明确的“忽略 X”子句。
- 如果页面的整个版块总是产生噪音(例如轮播图、“最近查看”小部件),请考虑切换到一个更具体的、只加载您关心的内容的 URL。