DynamoDB数据加载太慢;不尊重供应写作能力.DynamoDB在数据负载上的性能差

Question

我已经导出并将3.4亿行从dynamoDB转换为S3。我现在正在尝试使用数据管道将它们导入DynamoDB。

我的表格写入设置设置为5600个容量单元，我似乎无法让管道使用超过1000-1200的管道（由于公制图的粒度，真的很难说出真实数字。

我试图增加从属节点的数量以及每个从节点的实例的大小，但似乎没有任何区别。

有人有任何想法吗？

Answer 1

问题是表上有一个辅助索引。无论我选择的写入供应级别以及EMR中的机器数量如何，我都无法获得超过1000左右的时间。我将水平设置为7000，因此1000是不可接受的。

一旦我删除了辅助索引，写入供应就最大化了。