Scheduled:为 Parser 持续获取输入
Scheduled 是 Colbot Parsers 的定时输入功能。它将需要持续关注的信息来源接入 Parser,按照设定间隔在云端获取内容,并将发生变化的内容提交给 AI 提取,沿用 Parser 的字段、指令和审核流程,整理为 Google Sheets 中的数据。
一个 Parser 可以配置多条定时输入,每条输入独立设置来源、运行间隔和补充指令。对于需要反复收集和整理的信息,Scheduled 可以减少人工检查来源、复制内容和提交解析的工作。
从持续获取到结构化结果
Scheduled 负责按间隔获取来源内容,Parser 负责理解内容并提取目标字段。两者共同构成从信息来源到 Google Sheets 的持续处理流程:
- 获取来源内容。 按每条定时输入的来源配置和运行间隔,在云端自动获取内容。任务不依赖本地电脑或浏览器持续开启,关闭后仍可按设定间隔运行。云端获取不使用本地浏览器的登录会话,来源需要满足相应的访问条件。
- 判断输入是否变化。 与上次成功提交的输入比较;内容相同时,不创建新的解析任务。
- 提取目标字段。 内容发生变化时,交给 Parser 按表格列和提取指令生成结构化结果。
- 审核与写入。 按照 Parser 的审核设置处理结果,再写入 Google Sheets。
内容变化判断关注的是提交给 Parser 的输入,并不等同于只提取新增记录。最终提取哪些字段与记录,取决于 Parser 的设置。详细行为见 内容没有变化时会怎样。
可接入的输入来源
输入来源决定 Scheduled 从哪里获取内容,以及可以使用哪些获取选项;它不改变 Parser 的目标字段和审核流程。当前版本支持以下来源类型。
网页(Web page)
Web page 来源用于获取公开网页,适合产品公告、版本发布、活动列表和商品信息等需要持续关注的场景。例如,将公告内容整理成标题、发布日期、摘要和链接等 Google Sheets 列。
对于结构复杂或动态加载的页面,可以选择需要包含或排除的页面区域,并通过等待、点击或滚动等设置准备待提取内容。实际获取效果取决于目标网站的页面结构与访问条件。
- 配置流程与示例: 查看网页公告定时采集案例,了解从配置来源、设定间隔到获取解析结果的完整流程。
- 网页采集方式对比: 查看 Scheduled 与 Web Clipper 的功能对比,了解两者在定时运行、登录态、内容选择和页面交互方面的区别。
JSON API
JSON API 来源用于获取接口返回的数据,再由 Parser 提取和整理。接口响应不必与 Google Sheet 具有相同的字段名称或结构;Parser 可以根据指令从嵌套数据中选择相关信息,并组织为目标列。
支持 GET 和用于读取数据的 POST 请求,可按接口需要配置请求头与 JSON 请求体。适用于通过接口提供的发布记录、目录信息和其他定期更新的数据。
Scheduled 通用设置
无论使用哪种输入来源,都可以为每条定时输入分别设置运行间隔和补充解析指令。这两项决定多久获取一次内容,以及 Parser 需要如何处理这个来源。
运行间隔(Interval)
间隔从本次抓取运行结束时开始计算,不等待抓取结束后提交 Parser 的解析结束。
例如,运行间隔设为 1 小时,本次抓取在 10:05 结束,下一次自动运行会在 11:05 或稍后开始,而不是固定在每小时整点执行。
自动运行可能稍晚于所选间隔。这是间隔设置,不是指定时刻准点执行的承诺。
补充解析指令
补充解析指令(Additional extraction instructions)是可选项,用于内容获取完成后的 Parser 解析阶段,不参与来源抓取。它会随这条定时输入创建的每个任务一起提交,补充说明需要提取或处理哪些信息。
例如,版本发布来源可以补充“仅提取正式发布的版本,忽略预发布版本”。同一个 Parser 接收多个来源时,可以分别设置补充解析指令,结果仍按该 Parser 的目标字段整理。
只修改补充解析指令不会强制重新解析未变化的来源内容。是否创建新的解析任务,仍取决于获取的内容是否发生变化。
计费与账单
运行条件
Parser 所属团队必须有有效的 Basic 订阅,才能运行 Scheduled。
Scheduled 运行所产生的费用计入 Parser 所属团队的账单,并在 Credit History 中分别记录抓取与解析费用。
费用构成
一次完整的 Scheduled 抓取与解析流程,其费用由抓取费用和 Parser 任务解析费用两部分组成。
| 费用项目 | 包含什么 |
|---|---|
| 抓取费用 | 从来源获取内容产生的费用,按对应来源的计费规则计算。 |
| Parser 任务解析费用 | 获取内容后,创建并执行 Parser 任务产生的 AI 解析费用,按普通解析任务的规则另行计算。 |
来源选择页面显示的标价只针对抓取,不包含 Parser 任务解析费用。
计费与 Credits 常见问题:
FAQ 与详细规则
查看 全部 Scheduled 常见问题,或从 FAQ 总目录 查找其他主题。