数据运维

MariaDB复制过滤器简述

MariaDB复制过滤器简述

MariaDB复制过滤器1,在主服务器的二进制日志中只记录与hello.db的事件,除此之外都不记录2,主服务器的二进制日志发往从,从接收后进行数据sql过滤达到复制单表的功能如果在从服务器做过滤,主二进制日志会大量的发送到从服务器,二从服务器只需要一部分,则空间和带宽被占用如果在主服务器做过滤;一

捡田螺的小男孩 捡田螺的小男孩 2023-07-15
0 0 0
MariaDB复制和pttablechecksum

MariaDB复制和pttablechecksum

复制相关的文件:master.info:用于保存从服务器链接主服务器所需要的信息,每行一个值relay-log.info:文本文件,保存复制位置,包括二进制日志和中继日志的文件及位置为了复制的安全性:sync_master_info = 1 sync_relay_log = 1 sync_relay

穿过生命散发芬芳 穿过生命散发芬芳 2023-07-15
0 0 0
mysql5.6的GTID介绍

mysql5.6的GTID介绍

mysql5.6 借助GTID提升,5.6支持多线程复制(多数据库同时复制才有意义,仅仅复制一个则没有意义)通常,由于读取较大,主负责数据的写入,从负责的读取,可以有多从当主节点down后,自动fileover新的主服务器(将从提升到主),继续提供服务但是,如果在进行fileover过程中,主数据写

三掌柜 三掌柜 2023-07-15
0 0 0
MariaDB多线程复制SQL thread和GTID

MariaDB多线程复制SQL thread和GTID

一、简单主从模式配置步骤环境如下:db:mariadb-10.0.10-linux-x86_64.tar.gzos:centos6.71、配置主从节点的服务配置文件1.1、配置master节点:[mysqld] binlog-format=ROW log-bin=master-bin log-sla

大树 大树 2023-07-15
0 0 0
MariaDB多源复制数据汇总

MariaDB多源复制数据汇总

MariaDB多源复制数据汇总,如下图所示,在某些场景中,有A和b两个节点数据库,从数据分别读取ab两个节点的数据到一台slave数据库中主A和主B:[root@master local]# tar xf mariadb-10.0.10-linux-x86_64.tar.gz [root@mast

穿过生命散发芬芳 穿过生命散发芬芳 2023-07-15
0 0 0
Redis编译安装和saltstack简单配置(1)

Redis编译安装和saltstack简单配置(1)

分布式存储之-Redisredis常用于数据库读缓存和写缓存,通常写缓存需要考虑到数据一致性的问题,读缓存应用较多redis是一个开源的,使用c语言编写的,支持网络交互的,可基于内存也可持久化的key-value数据库目前国内最大的redis集群--新浪微博redis和memcached对比[roo

LOVEHL^ˇ^ LOVEHL^ˇ^ 2023-07-15
0 0 0
Redis简单的数据类型

Redis简单的数据类型

简单的使用:set插入字符串,get查看[root@yum-down ~]# redis-cli -h 10.10.0.250 -p 6379 10.10.0.250:6379> set keyname hello OK 10.10.0.250:6379> get keyname "he

醒在深海的猫 醒在深海的猫 2023-07-15
0 0 0
Redis持久化rdb和aof简单介绍

Redis持久化rdb和aof简单介绍

redis消息队列:发布和订阅,以及频道打开一个subscribe127.0.0.1:6379> SUBSCRIBE test Reading messages... (press Ctrl-C to quit) 1) "subscribe" 2) "test" 3) (integer) 1

Escape Escape 2023-07-15
0 0 0
Redis简单的主从配置

Redis简单的主从配置

redis主从配置复制配置文件[root@yum-down ~]# cd /etc/redis/ [root@yum-down redis]# cp 6379.conf 6380.conf 修改端口,和数据文件名,或者保存位置即可‘dir‘[root@yum-down redis]# vim 638

法医 法医 2023-07-15
0 0 0
Redis cluster简单集群配置

Redis cluster简单集群配置

redis cluster使用redis集群方案1,客户端分片。如:取余等2, 代理(proxy)分片。由proxy绝对数据存取,如:twemproxy。3,redis cluster。无中心模式,4, codis(豌豆荚开发的解决方案)redis cluster参考文档:http://redisd

贤蛋大眼萌 贤蛋大眼萌 2023-07-15
0 0 0
Redis管理工具

Redis管理工具

phpRedisAdmin phpredisadmin和phpmyadmin类似,主要用于web友好的界面对数据的操作,尽管本篇内容老生常谈,但是还是花点时间进行编辑phpredisadmin的git地址:https://github.com/ErikDubbelboer/phpRedisAdmin

向阳逐梦 向阳逐梦 2023-07-15
0 0 0
Redis之codis3.0.1集群简单实现

Redis之codis3.0.1集群简单实现

豌豆荚,快速分布式缓存git地址:https://github.com/CodisLabs/codis所有内容借鉴gitlab-豌豆荚Codis 由四部分组成:Codis Proxy (codis-proxy) 代理服务器做请求转发,codis-proxy 本身实现了 Redis 协议,codis-

竹子爱熊猫 竹子爱熊猫 2023-07-15
0 0 0
Redis3.2.5配置文件解释

Redis3.2.5配置文件解释

Redis配置文件示例。配置文件启动redis#注意,为了读取配置文件,Redis必须是以文件路径作为第一个参数开始:./redis-server /path/to/redis.confredis支持的参数单位:当需要内存大小时,可以指定以通常形式的1k 5GB 4M等等:# 1k => 10

竹子爱熊猫 竹子爱熊猫 2023-07-15
0 0 0
消息中间件概述

消息中间件概述

消息中间件特点:1,异步处理模式消息发送者可以发送一个消息而无需等待响应,消息发送者将消息发送到一条虚拟的通道或队列上,消息接收者则订阅或监听该通道,一条消息可能最终转发给一个或多个消息接受者,这些接受者都无需对消息发送者做出同步回应,整个过程是异步的,如:用户注册2,应用程序和应用程序调用关系为松

泡泡 泡泡 2023-07-15
0 0 0
RabbitMQ

RabbitMQ

metaq使用java语言编写,可以在多种平台部署,客户端支持c++和java,单台服务可支持1w以上各消息队列,事实上测试可能在4-6千之间,可横向扩展,队列持久化,队列长度无限(取决于磁盘大小),可从队列任何位置开始消费通常在磁盘中的二进制文件id为8位定长,通常情况下还需要有int,4个字节,

贤蛋大眼萌 贤蛋大眼萌 2023-07-15
0 0 0
MaxScale1.4.5中间件读写分离示例

MaxScale1.4.5中间件读写分离示例

当我们配置好主从后,我们要实现读写分离,把读操作分散到从服务器中,并且对多个从服务器能实现负载均衡如果不考虑sharding的话,maxscale算是一个比较好的中间件,方案的话无非就是两个驱动层做jdbc和php都有lb要么就是中间件maxscale或者atlas都可以,性能上 maxscale要

醒在深海的猫 醒在深海的猫 2023-07-15
0 0 0
MariaDB Galera Cluster配置使用

MariaDB Galera Cluster配置使用

MariaDB Galera Cluster是MariaDB的同步多主集群。它仅在Linux上可用,并且仅支持xtraDB/InnoDB存储引擎,对MyISAM也有一定的支持(https://mariadb.com/kb/en/mariadb/galera-cluster-system-variab

张二河 张二河 2023-07-15
0 0 0
zabbix数据库使用mysqlproxy读写分离

zabbix数据库使用mysqlproxy读写分离

最早使用程序实现的读写不利于扩展,依赖太高。mysql-proxy通过lua脚本来实现读写的分离,当访问数据库的过程中有一个中间件可以将增删改查的语句进行转发到后端的服务器上,如,写操作到主服务器,读操作到从服务器(暂且不提主从实现),那么读多写少的环境中,多台从库分摊到读操作,在这个lua脚本中明

大白菜程序猿 大白菜程序猿 2023-07-15
0 0 0
Mariadb Galera与MaxScale代理配置参考

Mariadb Galera与MaxScale代理配置参考

Galera集群参考 MariaDB Galera Cluster配置使用MaxScale配置参考 MaxScale1.4.5中间件读写分离示例 中的进行安装其他参考:https://mariadb.com/kb/en/mariadb-enterprise/mariadb-maxscale-1

大树 大树 2023-07-15
0 0 0
activemq+zookeeper集群配置笔记

activemq+zookeeper集群配置笔记

activemq官网提供三种集群方式,Shared File System Master Slave,JDBC Master Slave,Replicated LevelDB Store,本章采用最后一种http://activemq.apache.org/masterslave.html ,官网是

向阳逐梦 向阳逐梦 2023-07-15
0 0 0
1 … 1,197 1,198 1,199 1,200 1,201 … 1,807