1 背景与目标 1.1 背景 国际财务泰国每月月初账单任务生成，或者重算账单数据，数据同步方案为mysql通过binlake同步ES数据，在同步过程中发现计费事件表，计费结果表均有延迟，ES数据与Mysql数据不一致，导致业务页面查询数据不准确，部分核心计算通过ES校验失败 1.2目标 解决binlake到JMQ积压同步ES延迟问题 2 当前业务流程 2.1 流程图 现有业务基本流程如下图，包含运营端和外部数据接入，整体操作到数据存储流程 2.2 数据流 3 问题分析 3.1 问题现象 jmq积压，报警国内站截图如…
第二十四章 使用游标 本章将介绍什么是游标以及如何使用游标 游标 之前的select语句检索出来的数据，没有办法得到第一行或者下一行 有时，需要在检索出来的行中前进或后退一行或多行。这就是使用游标的原因。 游标（cursor）是一个存储在MySQL服务器上的数据库查询，它不是一条SELECT语句，而是被该语句检索出来的结果集。 在存储了游标之后，应用程序可以根据需要滚动或浏览其中的数据。 MySQL游标只能用于存储过程（和函数） 使用游标 使用游标涉及几个明确的步骤： 在能够使用游标前，必须声明（定义）它。这个过程…
在服务器资源有限的情况下，可利用该方案快速搭建各类 mysql 架构方案。各 MySQL 实例共享一个 mysqld 主程序，但各实例数据目录是独立的，存放在不同的文件夹中；好了、废话不多说，直接上干货，具体搭建步骤如下 原文链接 环境介绍 实例 主机 mysql port mysqlx port datadir mysql1 192.168.31.100 3306 33060 /var/lib/mysql1/ mysql2 192.168.31.100 3307 33070 /var/lib/mysql2/ my…
我是风筝，公众号「古时的风筝」，专注于 Java技术 及周边生态。 文章会收录在 JavaNewBee 中，更有 Java 后端知识图谱，从小白到大牛要走的路都在里面。 有朋友聊到他们的系统中要接入全文检索，这让我想起了很久以前为一个很古老的项目添加搜索功能的事儿。 一提到全文检索，我们首先就会想到搜索引擎。也就是用一个词、一段文本搜索出匹配的内容。一般这种技术都有对应的实现方式，ES（ElasticSearch）就是专门干这个的，如果你们的业务中明确需要全文检索，或者简单一点说，需要根据关键词搜索出匹配的内容，那…
摘要：为实现不同的功能，GaussDB（DWS）提供了不同的数据对象类型，包括索引、行存表、列存表及其辅助表等。这些数据对象在特定的条件下实现不同的功能，为数据库的快速高效提供了保证，本文对部分数据对象进行介绍。 本文分享自华为云社区《GaussDB（DWS）之数据对象及相互关系总结》，作者：我的橘子呢 。 为实现不同的功能，GaussDB（DWS）提供了不同的数据对象类型，包括索引、行存表、列存表及其辅助表等。这些数据对象在特定的条件下实现不同的功能，为数据库的快速高效提供了保证，本文对部分数据对象进行介绍。 1…
mysql间隙锁引起的死锁分析 实际业务场景 在我们使用mysql的时候，如果不注意间隙锁容易引起死锁，最近分析一个业务场景就是间隙锁导致的死锁，业务抽象如下： 系统有一个批量新增业务资源的功能，实现逻辑如下（businnessid为非唯一索引）： update 业务表 set isdeleted=1 where bussinessid=123; insert into 业务表 在并发场景下，以上逻辑产生了死锁。 以下为死锁具体分析以及还原死锁产生过程，最后给出解决方案。 创建一张表 CREATE TABLE `l…
Python基础之MySQL数据库 目录 Python基础之MySQL数据库 一、约束概述 1、为什么要约束 2、什么是约束 3、约束的分类 4、查看当前表已有的约束 二、约束语法及用法 1、无符号 2、零填充 3、非空 4、默认值 5、唯一值 5、1.单列唯一（列级） 5、2.联合唯一（表级） 6、主键 7、自增 8、外键 8、1.外键的定义 8、2.外键的作用 8、3.外键的建立 8、4.外键的多种关系 1.一对多： 2.多对多： 3.一对一： 一、约束概述 1、为什么要约束 为了防止数据库中存在不符合语义…
目录 SQL将小数转为保留两位的百分数 常用的日期格式化 补充： 秒/毫秒转为持续时间 常用拼接方式： 本篇开启数据库在工作中常用到的格式转换与工具，欢迎大家评论留言😄 SQL将小数转为保留两位的百分数 CONCAT(CONVERT((<需要转换的值>)*100,DECIMAL(18,2)),'%') turnNum 常用的日期格式化 引用的是CSDN博主isTrueLoveColour的文章，并稍加补充 DATE_FORMAT(<日期>,<格式类型>) %a…
Mysql简要知识点概括，看到就能回忆起相关内容为最妙~~ 一、写在前 知识学了就忘！不用就忘！我太健忘！特此记录！用于复习打卡！Mysql干就完事了！ 二、来辣！ MyISAM表把自增主键最大id记录到文件，重启也不会丢。InnoDB记录到内存，重启数据库和OPTIMIZE操作会丢。 Heap表存在于内存，用于临时高速存储。BLOB和TEXT不允许，只能=<>>=<=；不支持自增，索引不可为NULL。 InnoDB支持的4中隔离级别，及逐级之间的区别。 BLOB和TEXT区别：对BLOB值…
GreatSQL社区原创内容未经授权不得随意使用，转载请联系小编并注明来源。 GreatSQL是MySQL的国产分支版本，使用上与MySQL一致。 作者：nw MySQL Hash Join前世今生 因工作需要，对MySQL Hash Join的内部实现做了一些探索和实践，对这个由8.0.18开始引入的连接算法有了一定的了解，写文总结与各位大佬分享，欢迎大家指教。因篇幅较长，这份总结分成若干部分，我们今天先一起来看一下MySQL Hash join的变迁史。 爬了一下 MySQL worklog[1]，并结合源码及…