redis作为缓存使用已经是司空见惯，但是使用redis后也可能会碰到一系列的问题，尤其是数据量很大的时候，经典的几个问题如下：(一)缓存和数据库间数据一致性问题分布式环境下（单机就不用说了）非常容易出现缓存和数据库间的数据一致性问题，针对这一点的话，只能说，如果你的项目对缓存的要求是强一致性的，那
2023-07-12
mysql中in 和exists 区别mysql中的in语句是把外表和内表作hash 连接，而exists语句是对外表作loop循环，每次loop循环再对内表进行查询。一直大家都认为exists比in语句的效率要高，这种说法其实是不准确的。这个是要区分环境的。如果查询的两个表大小相当，那么用in和e
2023-07-12
数据千万级别之多，占用的存储空间也比较大，可想而知它不会存储在一块连续的物理空间上，而是链式存储在多个碎片的物理空间上。可能对于长字符串的比较，就用更多的时间查找与比较，这就导致用更多的时间。可以做表拆分，减少单表字段数量，优化表结构。在保证主键有效的情况下，检查主键索引的字段顺序，使得查询语句中条
2023-07-12
对于低性能的SQL语句的定位，最重要也是最有效的方法就是使用执行计划。 我们知道，不管是哪种数据库，或者是哪种数据库引擎，在对一条SQL语句进行执行的过程中都会做很多相关的优化，对于查询语句，最重要的优化方式就是使用索引。 而执行计划，就是显示数据库引擎对于SQL语句的执行的详细情况，其中包含了是否
2023-07-12
索引是对数据库表中一列或多列的值进行排序的一种结构。一个非常恰当的比喻就是书的目录页与书的正文内容之间的关系，为了方便查找书中的内容，通过对内容建立索引形成目录。索引是一个文件，它是要占据物理空间的。主键索引: 数据列不允许重复，不允许为NULL.一个表只能有一个主键。唯一索引: 数据列不允许重复，
2023-07-12
什么是数据库事务？如果没有事物会有什么后果？事务的特性是什么？事务是指作为单个逻辑工作单元执行的一系列操作，可以被看作一个单元的一系列SQL语句的集合。要么完全地执行，要么完全地不执行。如果不对数据库进行并发控制，可能会产生 脏读、非重复读、幻像读、丢失修改的异常情况。事务的特性（ACID）A, a
2023-07-12
什么是脏读？幻读？不可重复读？什么是事务的隔离级别？Mysql的默认隔离级别是？脏读：事务A读取了事务B更新的数据，然后B回滚操作，那么A读取到的数据是脏数据 不可重复读：事务 A 多次读取同一数据，事务 B 在事务A多次读取的过程中，对数据作了更新并提交，导致事务A多次读取同一数据时，结果 不一致
2023-07-12
事物隔离是怎么实现的？是基于锁实现的.有哪些锁？分别介绍下在DBMS中，可以按照锁的粒度把数据库锁分为行级锁(INNODB引擎)、表级锁(MYISAM引擎)和页级锁(BDB引擎 )。行级锁行级锁是Mysql中锁定粒度最细的一种锁，表示只针对当前操作的行进行加锁。行级锁能大大减少数据库操作的冲突。其加
2023-07-12
生产环境数据量越来越大，客户越来越多，项目功能也越来越多，项目本身也越来越多，导致之前的服务器内存、硬盘都已经渐渐的不够用了，当时出现了2种解决方案，增加服务器配置和新购服务器，但是就算是新增硬盘，也需要对数据库进行迁移，所以就采用了新购服务器的方案，并且因为之前是高效云盘，出现过IO占满的情况，所
2023-07-12
最近发生在我公司的事故，以及如何避免，并且如何处理优化。间接原因还有很多，技术跟不上业务的发展，由每日百万量到千万级是一个大的跨进，公司对于系统优化的处理优先级不高，技术开发人手的短缺第一次宕机20180913某个点，公司某服务化项目的RDS实例连接飙升，CPU升到100%，拒绝了其他应用的所有请求
2023-07-12
随着容器基础设施的出现，容器基础设施的测试变得与机器镜像的测试一样重要。传统的基础设施管理是一项手动任务，由系统管理员管理静态服务器。现代云平台的自动化能力改变了这种工作方式：基础设施通常被描述为“代码”，基础设施管理系统会对基础设施自动做出变更。因此，基础设施的变得更加动态，周转时间也要短得多。基
2023-07-12
多关于索引，分为以下几点来讲解：一、索引的概述(什么是索引,索引的优缺点)二、索引的基本使用（创建索引）三、索引的基本原理（面试重点）四、索引的数据结构（B树，hash）五、创建索引的原则（重中之重，面试必问！敬请收藏！）六、百万级别或以上的数据如何删除一、索引的概述1）什么是索引？索引是一种特殊的
2023-07-12
2015年之前，微信支付业务快速发展，需要一款数据库能够安全高效的支撑微信支付商户系统核心业务，这个重任落在了腾讯数据库团队自研PostgreSQL上。2016年7月，腾讯云对外发布云数据库PostgreSQL，提供腾讯自研的内核优化版和社区版两个版本，以及提供分布式集群架构（分布式集群内部代号Po
2023-07-12
存储原理（持久化）MongoMongo的数据将会保存在底层文件系统，因此存储容量远大于redis和memcached。一个database中所有的collections以及索引信息会分散存储在多个数据文件中，即mongodb并没有像SQL数据库那样，每个表的数据、索引分别存储；数据分块的单位为ext
2023-07-12
MySQL 8.0已于2018年4月19日GA，从Release Note中看到无论从新功能，诸如：隐藏索引、配置持久化、CTE(Common Table Expressions)、窗口函数、New UTF8，还是性能上的提升MySQL 8.0无疑都作出了重大的改善，大家应该都有跃跃欲试的冲动了吧。
2023-07-12
在MySQL界，一个存在很久的话题，就是：哪个中间件实现的分库分表方案比较好啊？当然对于同一个问题，不同人有不同的理解，也都具有两面性的特征，有人说好，也有人说不好，我们首先看一下这种方案是如何实现的。MyCat的实现架构大概上上图所示，其实如果只看图的话，这样的架构真是完美无缺，自动分片，自动聚合
2023-07-12
Redis 提供了 5 种数据结构。理解每种数据结构的特点，对于 Redis 的 开发运维 非常重要，同时掌握 Redis 的 单线程命令处理 机制，会使 数据结构 和 命令 的选择事半功倍。接下来的几篇文章，将从如下几个方面介绍 Redis 的几种数据结构，命令使用及其应用场景。预备知识：几个简单
2023-07-12
Redis是一种高级key-value数据库。数据可以持久化，而且支持的数据类型很丰富。有字符串，链表，集 合和有序集合。支持在服务器端计算集合的并，交和补集(difference)等，还支持多种排序功能。所以Redis也可以被看成是一个数据结构服务器。Redis为了保证效率，数据缓存在内存中，Re
2023-07-12
实际录入数据库的过程中，如果数据量比较大的话，难免会因为一些原因，而录入多条重复的记录，那么应该如何操作才能删除重复行，并且保留一条id较大，或者较小的记录呢。在本例中所用数据表结构如下所示tdb_goods表中数据重复如图所示首先第一步，利用group by分组查出每组中数目大于2的（即重复记录的
2023-07-12
坊间有传言：MySQL性能优化有个神器，叫做explain，它可以对select语句进行分析并且输出详细的select执行过程的详细信息，让开发者从这些信息中获得优化的思路。下面来讲讲这个MySQL提供的explain命令：语法：explain SQL语句 例如：1explain select *
2023-07-12