栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

SpringBoot+kafka+ES实现信息数据同步管理(上)

SpringBoot+kafka+ES实现信息数据同步管理(上)

最近刚做完一个新的项目,趁着闲暇时间记录下用的项目结构与知识点

一、项目整体技术结构

本项目主要是需要的数据存储于TIDB与ES中,页面通过SpringBoot从ES中查询数据,在对数据有增、删、改的情况下,通过java后台对数据库数据进行同步,同时将增、删、改操作的数据同步发送到消息队列kafka中,再通过kafka将数据同步到ES中,这样始终保持数据库数据与ES数据一致。结构如下图

二、项目技术架构分析

1、项目才用kafka中间件作为消息同步工具,是因为防止该系统在使用时,用户量过多导致操作数据量过多而出现的问题。

2、使用java操作数据库是对数据能进行稳定方便存储,因为在数据初始化时候,TIDB数据与ES数据是同步导入的,后续,通过页面对部分数据进行维护(增删改)

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/734816.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号