数据运维

面向开发的内存调试神器,如何使用ASAN检测内存泄漏、堆栈溢出等问题 …

面向开发的内存调试神器,如何使用ASAN检测内存泄漏、堆栈溢出等问题 …

介绍首先,先介绍一下 Sanitizer 项目,该项目是谷歌出品的一个开源项目,该项目包含了 ASAN、LSAN、MSAN、TSAN等内存、线程错误的检测工具,这里简单介绍一下这几个工具的作用:ASAN: 内存错误检测工具,在编译命令中添加-fsanitize=address启用LSAN: 内存泄漏

醒在深海的猫 醒在深海的猫 2023-08-15
0 0 0
微服务系统架构

微服务系统架构

微服务系统架构背景回忆一下微服务架构是如何进化产生的,最早出现的是单体应用架构,后来为了具备一定的扩展和可靠性,就有了垂直拆分架构,也就是加了个负载均衡,而到现在的微服务架构则是进一步在探讨一个应用系统该如何设计才能够更好的开发、管理更加灵活高效。什么是微服务架构微服务架构的核心思想是:分而治之,就

张二河 张二河 2023-08-15
0 0 0
浅析MySQL与ElasticSearch的组合使用

浅析MySQL与ElasticSearch的组合使用

1. 导入假设有一业务场景:现有一电子商务系统需要具备让用户准确的找到自己想要商品的功能,因此怎么也绕不开的就是商品信息的检索了可以来分析一下,对于一个电商系统而言,商品可能是由一个商品整体描述SPU对应不同的销售单元SKU来构成,同时商品还有对应的品牌信息、商品分类信息等,这些信息都有可能有对应的

LOVEHL^ˇ^ LOVEHL^ˇ^ 2023-08-15
0 0 0
MySQL内存管理机制浅析

MySQL内存管理机制浅析

一、placement new的定义通常情况下,C++中通过用new方式申请内存空间时,是在系统的堆内存空间中进行分配,底层使用C标准库的malloc()完成内存分配工作。因此本次申请的内存空间大小,是根据程序运行时对象的大小及使用情况来决定的。但是某些场景中,可能需要预先分配完成内存空间,然后再把

捡田螺的小男孩 捡田螺的小男孩 2023-08-15
0 0 0
MySQL主从备库过滤参数分析和测试

MySQL主从备库过滤参数分析和测试

测试环境:GTID的主从复制,主库(9900)——》备库(9909),存在测试库表:9900_db1库:t1、t2、t3、t4、t5表9900_db2库:t6、t7、t8、t9、t10表1、replicate-do-db参数:--replicate-do-db=name,只同步指定的数据库,可以使用

共饮一杯 共饮一杯 2023-08-15
0 0 0
GreatSQL 开源数据库 & NVIDIA InfiniBand存算分离池化方案:实现高性能分布式部署 .. …

GreatSQL 开源数据库 & NVIDIA InfiniBand存算分离池化方案:实现高性能分布式部署 .. …

NVIDIA InfiniBand是一种被广泛使用的网络互联技术,基于IBTA(InfiniBand Trade Association)而定义的高带宽、低延时、低CPU占用率、大规模易扩展的通信技术,是世界领先的超级计算机的互连首选,为高性能计算、人工智能、云计算、存储等众多数据密集型应用提供了强

醒在深海的猫 醒在深海的猫 2023-08-15
0 0 0
Linux 利用Cgroup 资源控制

Linux 利用Cgroup 资源控制

GreatSQL 社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。GreatSQL 是 MySQL 的国产分支版本,使用上与 MySQL 一致。cgroups 是 Linux 内核提供的可以限制进程所使用资源的机制,可以对 cpu,内存等资源实现精细化的控制.什么是 cgroups控制族

三掌柜 三掌柜 2023-08-15
0 0 0
浅谈GTID及简单测试

浅谈GTID及简单测试

简单介绍一下GTID,并有部分相关实验,技术有限介绍的比较浅显,文中有问题欢迎指正。GTID相信大家都不陌生,GTID的英文全称为Global Transaction Identifier,在MySQL主从架构中应用广泛。GTID是由“UUID:事务号“组成的,GTID是基于事务的,在主从架构中,在

共饮一杯 共饮一杯 2023-08-15
0 0 0
MySQL源码分析之SQL函数执行

MySQL源码分析之SQL函数执行

1.MySQL中执行一条SQL的总体流程2.SQL函数执行过程1.MySQL中执行一条SQL的总体流程一条包含函数的SQL语句,在MySQL中会经过: 客户端发送,服务器连接,语法解析,语句执行的过程。调试源码,分析函数的具体执行过程,在客户端,执行select to_char(‘test’) fr

捡田螺的小男孩 捡田螺的小男孩 2023-08-15
0 0 0
MySQL8.0修改lower_case_table_names参数导致重启失败

MySQL8.0修改lower_case_table_names参数导致重启失败

事件起因:在测试一个数据迁移工具时,源端oracle19c数据迁移到目标端MySQL8.0,提示迁移目标端  Unknown database 'SBTEST',报错如下: 2022-07-29 10:08:19,155 ERROR com.greatsync.connector.jdbc.i

LOVEHL^ˇ^ LOVEHL^ˇ^ 2023-08-15
0 0 0
Java Web中日志跟踪的简单实现

Java Web中日志跟踪的简单实现

一、前言     在编码过程中,常常需要写打印日志语句,我们期望的是同一个业务的日志都在一块,在出问题的时候好根据日志来排查问题。而现实是在应用运行中,日志的输出常常来自不同线程,甚至是在不同微服务中,各种日志记录往往彼此穿插,很难串起来。所以往往在日志中手动增加一些关键字,来对接口的调用链路来进行

竹子爱熊猫 竹子爱熊猫 2023-08-15
0 0 0
GreatSQL重磅特性,InnoDB并行并行查询优化测试

GreatSQL重磅特性,InnoDB并行并行查询优化测试

InnoDB并行查询优化怎么实现的?根据B+树的特点,可以将B+树划分为若干子树,此时多个线程可以并行扫描同一张InnoDB表的不同部分。对执行计划进行多线程改造,每个子线程执行计划与MySQL原始执行计划一致,但每个子线程只需扫描表的部分数据,子线程扫描完成后再进行结果汇总。通过多线程改造,可以充

贤蛋大眼萌 贤蛋大眼萌 2023-08-15
0 0 0
应用系统时不时的有锁发生分析

应用系统时不时的有锁发生分析

现象Lock wait timeout exceeded; try restarting transaction; nested exception is com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Lock

贤蛋大眼萌 贤蛋大眼萌 2023-08-15
0 0 0
数据库服务器CPU高

数据库服务器CPU高

使用此脚本有如下四个前提1、当使用top 可以看到mysqld占用CPU高达百分之好几百2、使用top -Hp `pidof mysqld`可以看到每个线程使用的CPU高达百分之90以上3、并且在慢日志设置为1秒都抓不到慢SQL(因为有的时候SQL语句通过消耗资源来达到快速执行的目的)4、可以通过如

大猫 大猫 2023-08-15
0 0 0
网卡限速工具之WonderShaper

网卡限速工具之WonderShaper

什么是WonderShaper如何安装WonderShaperWonderShaper使用帮助WonderShaper使用示例WonderShaper在测试中的应用网速单位转换总结1.什么是WonderShaperWonderShaper是用来对特定网卡进行快速限速的工具,它实际是对Linux的tc

大猫 大猫 2023-08-15
0 0 0
开发的话不可信

开发的话不可信

今天开发告诉我说表损坏不能查也不能删,当然开发的话不能信。自己测试下mysql> select * from order_lines_field_b limit 1;一直是卡死状态一直在想为啥不报错的,如果损坏了要报错。于是百度看下,说看锁,我就晕了,又忘记了,mysql的select可能造成

法医 法医 2023-08-15
0 0 0
字符集导致的恢复失败

字符集导致的恢复失败

说明:PXC是从5.7 升级到8.0.25现象:在一个安装好的8.0.25 mysql中做恢复演练。[root@dba-testbak ~]# cat /tmp/imp162.log ERROR 1273 (HY000) at line 39: Unknown collation: 'utf8mb

LOVEHL^ˇ^ LOVEHL^ˇ^ 2023-08-15
0 0 0
什么?MySQL 8.0 会同时修改两个ib_logfilesN 文件?

什么?MySQL 8.0 会同时修改两个ib_logfilesN 文件?

* GreatSQL社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。问题现象描述测试MySQL单机时,无意发现,MySQL 8.0的 ib_logfilesN的显示如下:ll ib_logfile* -rw-r----- 1 greatsql greatsql 134217728 8月

Escape Escape 2023-08-15
0 0 0
redo、binlog、两阶段提交、undo简介

redo、binlog、两阶段提交、undo简介

redo log简单来讲:redo log是mysql中重要的日志模块,是innodb引擎特有的,记录着事务对数据的修改,保证了事务的原子性和持久性。mysql里面经常说的日志先行策略(Write-Ahead Logging,WAL),关键点就在于先写日志,再写磁盘。WAL把随机写转化为了顺序写,因

LOVEHL^ˇ^ LOVEHL^ˇ^ 2023-08-15
0 0 0
救场如救火,一天一个报错,但又是那么巧合

救场如救火,一天一个报错,但又是那么巧合

念念不忘必有回响,排查问题不要心急,要静,带上耳机一顿思考。错误其实已经百度了,但是总是看不出来什么原因。用百度或许要先给百度拍错。第一天开发发来问题现象1: 报错1开发:这个是ETL的报错,ETL工具是informatica。当天凌晨两点一直报错(把调度重新执行就可以了),到早晨之后MySQL就很

贤蛋大眼萌 贤蛋大眼萌 2023-08-15
0 0 0
1 … 680 681 682 683 684 … 1,807