对接步骤
- 1
部署采集队列服务,并在后台配置队列连接信息。
- 2
添加资源站接口,指定任务类型为全量或增量。
- 3
设置失败重试次数与限速,防止目标站点封禁。
- 4
通过任务面板观察入库进度与失败原因。
注意事项
- 队列积压时优先排查目标接口响应时间,而不是盲目加大消费者数量。
- 增量采集依赖资源站的更新时间字段,需确认该字段时区一致。
部署采集队列服务,并在后台配置队列连接信息。
添加资源站接口,指定任务类型为全量或增量。
设置失败重试次数与限速,防止目标站点封禁。
通过任务面板观察入库进度与失败原因。