我的编程空间,编程开发者的网络收藏夹
学习永远不晚

PostgreSql与es的数据同步方案调研

短信预约 信息系统项目管理师 报名、考试、查分时间动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

PostgreSql与es的数据同步方案调研

PostgreSql与es的数据同步方案调研

logstash

基于时间戳,或者id增量同步,且不能实时同步暂不考虑


pg-es-fdw  
https://github.com/Mikulas/pg-es-fdw?spm=a2c4e.10696291.0.0.4c7b19a49sHIXL
python> = 2.7 <3,任何elasticsearch(基于两年前的情况),postgres> = 9.2
已存档
年久失修且不在维护,故不考虑


Go-amazonriver  
https://github.com/hellobike/amazonriver
Postgresql 9.4 or later
Kafka 0.8 or later
ElasticSearch 5.x
仅支持es5.x,有坑且不怎么维护了,不考虑

abc import
https://github.com/appbaseio/abc
维护没Debezium活跃,但无需借助kafka,可以考虑

Debezium
https://github.com/debezium/debezium
基于kafka,支持mysql,mongo,postgresql,github提交活跃,可以考虑

如果大家有更好的方案,欢迎留言

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

PostgreSql与es的数据同步方案调研

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

PostgreSql与es的数据同步方案调研

logstash 基于时间戳,或者id增量同步,且不能实时同步暂不考虑 pg-es-fdw   https://github.com/Mikulas/pg-es-fdw?spm=a2c4e.10696291.0.0.4c7b19a49sHIXL python
PostgreSql与es的数据同步方案调研
2021-04-29

【ElasticSearch】ES与MySQL数据同步方案及Java实现

文章目录 一、同步实现思路1、方案一:同步调用2、方案二:异步通知3、方案三:监听binlog 二、实现ES与MySQL数据同步1、导入hotel-admin工程2、项目分析3、SpringAMQP整合4、声明队列和交换机5、发
2023-08-30

Python操作ES的方式及与Mysql数据同步的方法

这篇文章主要介绍了Python操作ES的方式及与Mysql数据同步的方法的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Python操作ES的方式及与Mysql数据同步的方法文章都会有所收获,下面我们一起来看看吧
2023-06-30

MySQL数据同步Elasticsearch的4种方案

目录1.同步双写2.异步双写3.定时任务4.数据订阅今天给大家介绍一个电商中常见的场景 —— mysql 数据同步 Elasticsearch。商品检索大家应该都在各种电商网站检索过商品,检索商品一般都是通过什么实
2023-03-20

Golang与RabbitMQ实现实时数据同步的解决方案

Golang与RabbitMQ可以实现实时数据同步的解决方案,下面是一种常见的实现方式:1. 使用Golang编写生产者程序,该程序负责将数据实时发送到RabbitMQ的消息队列中。可以使用RabbitMQ的Golang客户端库(如gith
2023-10-08

MySQL数据同步Elasticsearch的方案有哪些

本篇内容介绍了“MySQL数据同步Elasticsearch的方案有哪些”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!商品检索大家应该都在各
2023-07-05

触发器在数据同步延迟问题中的解决方案

在数据同步延迟问题中,触发器可以作为一种解决方案,特别是在需要实时同步数据的场景中。以下是一些关于触发器在数据同步延迟问题中应用的解决方案:触发器在数据同步中的应用基于触发器的增量同步:使用触发器实时同步数据的步骤包括创建增量表,当原表中
触发器在数据同步延迟问题中的解决方案
2024-09-26

Swoole和Workerman对PHP与MySQL的数据镜像和数据同步的优化方法

概述:在现代应用程序开发中,数据的镜像和同步是至关重要的。特别是在PHP与MySQL的组合中,如何有效地进行数据镜像和数据同步,成为了一个关键问题。本文将介绍如何使用Swoole和Workerman来实现对PHP与MySQL的数据镜像和数据
2023-10-21

编程热搜

目录