elasticsearch和mysql数据库的数据同步问题(二)

news/2024/7/7 5:53:32 标签: 数据库, elasticsearch, mysql, rabbitmq

使用 RabbitMq 异步通知的方式,解决数据同步问题。

  1. 消息的提供者和消费者导入相关的依赖和配置文件
<!--amqp-->
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-amqp</artifactId>
</dependency>
spring:
  rabbitmq:
    virtual-host: /
    host: 192.168.72.101
    port: 5672
    username: root
    password: 123
  1. 声明交换机和消息队列
public class MqConstants {
    /**
     * 交换机
     */
    public static final String HOTEL_EXCHANGE = "hotel.topic";
    /**
     * 监听新增和修改的队列
     */
    public static final String HOTEL_INSERT_QUEUE = "hotel.insert.queue";
    /**
     * 监听删除的队列
     */
    public static final String HOTEL_DELETE_QUEUE = "hotel.delete.queue";
    /**
     * 新增或修改的 RoutingKey
     */
    public static final String HOTEL_INSERT_KEY = "hotel.insert";
    /**
     * 删除的RoutingKey
     */
    public static final String HOTEL_DELETE_KEY = "hotel.delete";
}
  1. 用户修改了数据库的数据后,向 elasticsearch 模块发送消息
    发送的消息为已更改数据的 id

对 insert, update, delete 请求发送消息

	@Autowired
    private IHotelService hotelService;
    @Autowired
    private RabbitTemplate rabbitTemplate;
	
	@PostMapping
    public void saveHotel(@RequestBody Hotel hotel){
        hotelService.save(hotel);
        rabbitTemplate.convertAndSend(MqConstants.HOTEL_EXCHANGE, MqConstants.HOTEL_INSERT_KEY, hotel.getId());
    }

    @PutMapping
    public void updateById(@RequestBody Hotel hotel){
        if (hotel.getId() == null) {
            throw new InvalidParameterException("id不能为空");
        }
        hotelService.updateById(hotel);
        rabbitTemplate.convertAndSend(MqConstants.HOTEL_EXCHANGE, MqConstants.HOTEL_INSERT_KEY, hotel.getId());
    }

    @DeleteMapping("/{id}")
    public void deleteById(@PathVariable("id") Long id) {
        hotelService.removeById(id);
        rabbitTemplate.convertAndSend(MqConstants.HOTEL_EXCHANGE, MqConstants.HOTEL_DELETE_KEY, id);
    }
  1. elasticsearch 模块,通过注解的方式接收发送方的消息
// 编写监听器
@Component
public class HotelListener {
    @Autowired
    private IHotelService hotelService;

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue(MqConstants.HOTEL_INSERT_QUEUE),
            exchange = @Exchange(value = MqConstants.HOTEL_EXCHANGE, type = ExchangeTypes.TOPIC),
            key = MqConstants.HOTEL_INSERT_KEY
    ))
    public void listenHotelInsertOrUpdate(Long id){
        hotelService.insertById(id);
    }

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue(MqConstants.HOTEL_DELETE_QUEUE),
            exchange = @Exchange(value = MqConstants.HOTEL_EXCHANGE, type = ExchangeTypes.TOPIC),
            key = MqConstants.HOTEL_DELETE_KEY
    ))
    public void listenHotelDelete(Long id){
        hotelService.deleteById(id);
    }
}

com.mysite.hotel.service.impl.HotelService 中实现业务

	@Autowired
    private RestHighLevelClient client;

    @Override
    public void deleteById(Long id) {
        try {
            DeleteRequest request = new DeleteRequest("hotel", id.toString());
            client.delete(request, RequestOptions.DEFAULT);
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    @Override
    public void insertById(Long id) {
        try {
            Hotel hotel = getById(id);
            // 转换为文档类型
            HotelDoc hotelDoc = new HotelDoc(hotel);
            // 准备 request 对象
            IndexRequest request = new IndexRequest("hotel").id(hotel.getId().toString());
            // 准备 JSON 文档
            request.source(JSON.toJSONString(hotelDoc), XContentType.JSON);
            // 发送请求
            client.index(request, RequestOptions.DEFAULT);
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }
  • 优点:低耦合,实现难度一般
  • 缺点:依赖mq的可靠性

http://www.niftyadmin.cn/n/5441150.html

相关文章

web攻防——csrf,ssrf

csrf 当我们在访问自己的管理员系统的时候&#xff0c;打开别人发的钓鱼连接就会自动增加管理员&#xff08;前提&#xff0c;后台在登录状态&#xff09;当我们打开别人发的网站&#xff0c;就会触发增加管理员的数据包 假设我们要测试这个网站 看到这个&#xff0c;就得下载一…

Mysql——基础命令集合

目录 前期准备 先登录数据库 一、管理数据库 1.数据表结构解析 2.常用数据类型 3.适用所有类型的修饰符 4.使用数值型的修饰符 二、SQL语句 1.SQL语言分类 三、Mysql——Create,Show,Describe,Drop 1.创建数据库 2.查看数据库 3.切换数据库 4.创建数据表 5.查看…

Fetch、Axios 和 jQuery(Ajax) 三种常用的网络请求技术

Fetch、Axios 和 jQuery(Ajax) 是三种常用的网络请求技术&#xff0c;它们各自有着不同的特点和优势。本文将对这三种技术进行详细的介绍和比较&#xff0c;以帮助开发者更好地选择和使用合适的网络请求技术。 一、Fetch Fetch(浏览器自带) 是一种现代的网络请求 API&#xff…

【移动端】AMap Flutter与Android AMap SDK交互

背景 本文的背景&#xff0c;是因为我在开发高德地图时&#xff0c;需要自定义高德比例尺位置和样式&#xff1b;但结果查看了AMap Flutter插件和AMap SDK源码后&#xff0c;发现AMap无法添加自定义MyMethodCallHandler的实现类&#xff01; why&#xff1f; 源码 在Flutte…

【Java.mysql】——数据删改(DU) 附加数据库约束

目录 &#x1f6a9;更新(Update) &#x1f6a9;删除&#xff08;Delete&#xff09; &#x1f6a9;数据库约束 &#x1f388;约束类型 ✅NULL约束 ✅NNIQUE 唯一约束 ✅DEFAULT&#xff1a;默认值约束 ✅PRIMARY KEY&#xff1a;主键约束 ✅FOREIGN KEY&#xff1a;外键…

JavaSE(上)-Day8

JavaSE&#xff08;上&#xff09;-Day8 Scanner拓展字符串APIStringString的初始化 究竟比较的是什么&#xff1f;StringBuilderStringJoiner字符串原理字符串的拼接原理 Scanner拓展 package com.itheima.day09.test;import java.util.Scanner;/*** 键盘录入扩展* * author …

如何利用MySQL建立覆盖原表的索引优化查询性能

MySQL数据库中&#xff0c;建立合适的索引对于提高查询性能至关重要。然而&#xff0c;在某些情况下&#xff0c;我们可能需要进一步优化查询性能&#xff0c;而覆盖索引&#xff08;Covering Index&#xff09;就是一种有效的方法。本文将介绍什么是覆盖索引以及如何在MySQL中…

在CentOS 7上使用Ansible安装Nginx

一、准备工作 安装Ansible (如果尚未安装)&#xff1a; 在Ansible控制节点&#xff08;通常是你的本地机器或CI/CD服务器&#xff09;上安装Ansible。 sudo yum install epel-release sudo yum install ansible设置Inventory&#xff1a; 编辑或创建Ansible的inventory文件&…