使用AWS Datapipeline将DynamoDB导出到S3数据

Question

我有一个DynamoDB表，存储1Gb的数据。RCU和WCU各为1000。我设置了一个数据管道，将这1GB的数据导出到s3。整个1GB的数据在分区中导出到s3。我的问题是什么决定了这些分区的数量和大小？

Answer 1

非常有用，

在最近的视频“AWS Re：发明Amazon DynamoDB高级设计模式-第1部分”中，Rick Houlihan演示了在创建表时设置100k WCU配置容量，并提到每额外配置1000个WCU将添加1个分区，因此他的表从大约100个分区开始。分区在内部被限制为10gb，如果一个分区达到这个限制，就分成两个分区，否则它们将保持在一个分区内。这表明，所有数据可能仍位于一个分区内。

所有这些似乎都是抽象的/隐藏的，不让用户知道，但一般来说，您应该能够计算分区的估计数量。

AWS表示，在按需模式下，他们会自动将表的吞吐量增加一倍，超过之前的限制。措辞有点奇怪，但我相信最终他们会为您创建更多的分区，因为一个分区被查询或写入的速度比它能处理的快。

需要注意的是，许多人已经提到，一旦配置了分区，您可以将WCU的数量降低到您实际需要的数量，并且仍然保留配置的分区。