timeoutSeconds(最大 900 秒)的限制。 任何无法在该时间窗口内完成的工作——例如完整的重新同步、逐记录的扇出、对你进行速率限制的第三方 API——都必须拆分为更小的运行。
enqueueJob 正是用于此:它会请求 Twenty 工作进程稍后在其自己的进程中运行你应用中的某个逻辑函数,并使用其独立的超时预算。 调用方会立即返回。
将一次运行加入队列
从twenty-sdk/logic-function 导入 enqueueJob,并将其指向你想要运行的逻辑函数的 universalIdentifier。
src/logic-functions/sync-all-contacts.ts
payload 作为其处理程序参数接收。 它必须属于与调用方相同的应用程序——将其他应用的函数入队会被拒绝,并返回 Logic function not found。
enqueueJob 在作业被接受后立即返回,而不是在它运行完成后返回。 它不会返回目标的结果——如果你需要再次读取结果,让目标将其输出写入key-value store或工作区记录。作业选项
优先级尚不可配置。 入队的作业始终以最低优先级运行,因此平台工作永远不会被应用程序作业延迟。 对优先级的控制即将推出。
用法:分页处理一次长时间同步
典型模式是函数使用下一个游标将自身入队。 每次运行都在自己的超时时间内完成一页工作,当没有剩余内容时链条就会停止。src/logic-functions/sync-contacts-page.ts
按记录扇出(fan-out)
当工作天然按条目划分时,为每个条目入队一个作业,并让工作进程并行处理它们,而不是在内联循环中处理。长时间运行工作的最佳实践
两条规则涵盖几乎所有长作业:用递归代替循环,以及每次运行处理一块有界的数据块(chunk)。 试图一次完成所有事情的运行就是失败模式——它会触发超时,并在重试时从头开始重新执行整个过程。 相反,应调整单个数据块的大小,使其能够从容地在timeoutSeconds 内完成,持久化当前位置,然后入队下一次运行。
src/logic-functions/enrich-companies-batch.ts
- 以最慢的条目而不是平均值来确定块大小。
CHUNK_SIZE × worst-case item time必须在留有余量的情况下适配到timeoutSeconds中,否则在运行被切断时,一个数据块的尾部会丢失。 - 让终止条件显式化。 仅在返回的是完整数据块时继续递归。 仅在“无结果”时停止的链,如果源在中途返回一个较短的分页,将会永远继续下去。
- 在入队下一次运行之前持久化进度, 这样失败的链路会从上一个完成的数据块而不是从头开始重新启动。
- 保持每个数据块幂等。 在重试后重新处理一个数据块时,不能产生重复写入——应基于你处理的记录或外部 id 进行关键写入。
- 在工作会访问受限频率的第三方服务时,优先使用分块链而不是一次巨大的 fan-out。 使用
delayMs的链会自我节奏控制,而一次性入队的数千个作业会立即全部变为可运行状态。