如何处理来自数据库的 300k 条记录:Mule ESB

Question

我想处理来自远程系统运行的 sybase DB 的 300k 条记录。 目前，我们正在使用批处理从数据库中提取数据。 我们还定义了批量块大小：1000。但是我们无法从数据库中获取记录。请帮助我们。

Answer 1

您不需要批处理来提取数据。批处理将具有输入，过程记录和完整部分。 您的数据库连接器应位于将获取所有记录的输入区域中，并且流程记录将在输出区域中映射一条记录。 DB连接器中似乎存在连接问题。测试连接是否正常工作？尝试使用单独的流程并获取计数，看看您是否能够获得它。

Answer 2

您是否正在寻找 1000 卡盘中的流程？

1.将轮询范围与数据库连接器一起使用 2.启用水印 3.选择扇区选项。 4.使用同步处理策略。