大佬教程收集整理的这篇文章主要介绍了Dynamo db 分页查询和删除,大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。
我有一个包含大量数据的发电机数据库。在最大情况下,我们可以在一个分区中拥有多达 10 Gb 的数据。
我正在编写一系列 lambda 来定期清理它。
我有一系列的: lambda1 --> lambda2 -> lambda3
lambda1:将通过哈希键查询数据库,并以带分页的范围键前缀开头。我会将这些事件发送到 lambda2。它将在另一个 ddb 中维护 LastEvaluatedKey。这样,如果 lambda 超时,它将从 LastEvaluatedKey 重新开始。
lambda2:将应用一些过滤器并检查删除它是否安全。如果是这样,它将发送到 lambda3。
lambda3:将删除 ddb 中的行以及 s3 或其他需要的地方的相应数据。
我假设一旦清除了历史数据,lambda1 将在 15 分钟内完成,并且 lambda3 从 ddb 中删除项目的速度会快得多,但在那之前:
这是否适用于例如lambda1 将尝试使用最后一个评估的键进行分页,方法是在它超时并重试时从 ddb 获取它,并且可能是 lambda 3 会删除该键或中间的一些键。会不会搞砸 ddb 分页查询。
如果这是一个菜鸟问题,我们深表歉意。
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)
以上是大佬教程为你收集整理的Dynamo db 分页查询和删除全部内容,希望文章能够帮你解决Dynamo db 分页查询和删除所遇到的程序开发问题。
如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。
本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。