程序问答   发布时间:2022-06-02  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了将数据同步到 Elasticsearch 随机失败大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

如何解决将数据同步到 Elasticsearch 随机失败?

开发过程中遇到将数据同步到 Elasticsearch 随机失败的问题如何解决?下面主要结合日常开发的经验,给出你关于将数据同步到 Elasticsearch 随机失败的解决方法建议,希望对你解决将数据同步到 Elasticsearch 随机失败有所启发或帮助;

我有一个项目使用 Firebase 实时数据库作为 CRM 的主要工作数据库。在我的应用程序中,我有一个带有动态排序、搜索和过滤功能的“所有联系人”页面。由于 RTDB 是进行此类高级查询的垃圾,因此我使用 Cloud Function 将所有数据库更改同步到 Elasticsearch。 All Contacts 视图现在查询 Elasticsearch 以显示记录。

我发现有时对联系人记录的更改不会随机同步到 Elasticsearch。

这是我的云函数代码:https://www.codepile.net/pile/J6EgzP4g

我预计在更新联系人记录和反映这一点的 ES 索引之间会有延迟,但我不知道如何处理这些完全失败的问题。

该项目的用户群不断扩大,所有联系人中发生的写入操作数量也越来越多。人们还可以对一组联系人执行“批量操作”,这将导致一次性执行大量写入操作。 ES 一次可以摄取多少更改是否有限制?我的 ES 集群有 2 个摄取节点和 1 个决胜局。所有这些都以最小的 cpu 负载运行,但在一个摄取节点和决胜局上的 RAM 使用率很高。增加资源对那里有帮助吗?

假设这个问题不能完全消除,谁能想出一种方法来捕捉这些丢失的同步并重新处理它们,这样它们就不会完全失败?

谢谢...

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)

大佬总结

以上是大佬教程为你收集整理的将数据同步到 Elasticsearch 随机失败全部内容,希望文章能够帮你解决将数据同步到 Elasticsearch 随机失败所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。