数据运维

Hadoop on k8s 快速部署进阶精简篇

Hadoop on k8s 快速部署进阶精简篇

一、概述前面一篇文章已经很详细的介绍了Hadoop on k8s部署了,这里主要针对部署时可能会调整的地方和注意事项进行讲解,想详细了解详细部署过程可参考我上一篇文章:Hadoop on k8s 编排部署进阶篇图片二、快速部署步骤如下1)安装 gityum -y install git2)部署 my

贤蛋大眼萌 贤蛋大眼萌 2023-07-17
0 0 0
Redis缓存技术在搜索引擎中的应用:为用户提供更快速的搜索体验

Redis缓存技术在搜索引擎中的应用:为用户提供更快速的搜索体验

Redis是一个快速的内存数据结构存储系统,可以用来存储和访问数据,而搜索引擎是一种用于搜索并返回文档或网页等内容的工具。在搜索引擎的应用场景中,Redis可以作为一个关键的组件,用于缓存、索引和搜索数据。下面将对Redis在搜索引擎中的应用场景和如何实现搜索引擎进行详细讲解。Redis在搜索引擎中

穿过生命散发芬芳 穿过生命散发芬芳 2023-07-17
0 0 0
数据库性能优化之IN子查询优化

数据库性能优化之IN子查询优化

问题定义为了获取最近一年内有订单的用户信息,可以使用以下的三种写法去实现,它们在语义上是等价的。那它们的性能如何,适用场景是什么?这是本文讨论的主题。Query1 - IN子查询(= ANY)select * from customer where c_custkey in (select o_cu

醒在深海的猫 醒在深海的猫 2023-07-17
0 0 0
聊聊一种读取亿级Doris数据库的方法

聊聊一种读取亿级Doris数据库的方法

工作中,常常需要将线上doris同步至集市。读取doris数据同读取常规mysql基本相同。如果数据行小于千万,比较简单的方式直接单节点连接、读取和存储。Python示例如下:def get_data(sql,host='',port=2000,user='',password='',db=''):

大白菜程序猿 大白菜程序猿 2023-07-17
0 0 0
如何使用地理分区来遵守数据法规并在全球范围内提供低延迟

如何使用地理分区来遵守数据法规并在全球范围内提供低延迟

译者 | 李睿审校 | 重楼在当今互联互通的世界中,用户可以跨越多个大洲和国家使用应用程序。在处理数据监管要求的同时,在遥远的地理位置保持低延迟可能是一个挑战。分布式SQL数据库的地理分区功能可以通过将用户数据固定到所需的位置来帮助解决这一挑战。因此,以下探讨如何使用YugabyteDB Manag

向阳逐梦 向阳逐梦 2023-07-17
0 0 0
让我们一起给国产替代产品多点时间吧

让我们一起给国产替代产品多点时间吧

昨天在公众号转发了一个人大金仓的解决方案,实际上国产数据库厂商的一些有代表性的解决方案如果有兴趣的话都可以发给我,在我的公众号平台上免费宣传一下,能为国产数据库的推广尽一份力,一直是我的愿望。对于国产数据库,很多人是又爱又恨,不过我想这种“恨”也应该被我们的数据库厂商所包容,只有充分听取那些“恨”你

大白菜程序猿 大白菜程序猿 2023-07-17
0 0 0
面试官:HaspMap很熟了么,讲讲Redis字典吧!

面试官:HaspMap很熟了么,讲讲Redis字典吧!

哈喽,大家好,我是了不起。之前给大家介绍了Redis的基本数据结构,后来听说了一个故事:一个Java程序员去面试,前面面试问了几个 Java 的相关问题,回答还不错,接下来面试官就问了一句:看来 Java 基础还不错,Java HashMap 你熟悉吧?回答:那家伙老熟了,工作经常用,有看过源码。红

宇宙之一粟 宇宙之一粟 2023-07-17
0 0 0
解决 WebAPI 在容器中的启动初始化问题

解决 WebAPI 在容器中的启动初始化问题

在产品或项目的部署中,如果和下面场景类似,那么本文可能对您有所帮助。场景WebAPI 和  MySql  数据部署在同一服务器(通常是测试环境)。WebAPI 和  MySql  使用  docker-compose  进行部署。WebAPI  启动时有一些初始化的操作要做,而初始化需要从  MyS

张二河 张二河 2023-07-17
0 0 0
聊聊使用变量对 SQL 进行优化

聊聊使用变量对 SQL 进行优化

1.什么是变量变量其实就是我们定义的一个可变参数,其基本语法如下:--定义一个名称为@I的变量,指定其类型为整数DECLARE @I VARCHAR(20)--对变量@I赋值为SET @I='SQL数据库开发'--输出@I的值SELECT @I结果:SQL数据库开发其中DECLARE @部分是固定写

宇宙之一粟 宇宙之一粟 2023-07-17
0 0 0
一文看懂流行的Rust ORM

一文看懂流行的Rust ORM

译者 | 布加迪审校 | 重楼对象关系映射(ORM)是一种通过抽象数据库交互的底层细节来简化应用程序中数据访问和操作的技术。ORM使您能够使用首选编程语言来处理对象和类型,同时与关系数据库管理系统(RDBMS)无缝集成。如果您不精通SQL(结构化查询语言)或数据库管理,ORM的框架设计对用户友好。O

大白菜程序猿 大白菜程序猿 2023-07-17
0 0 0
Redis 安全问题详解:掌握这些措施保护您的数据

Redis 安全问题详解:掌握这些措施保护您的数据

Redis 是一种流行的 NoSQL 数据库,广泛用于许多 Web 应用程序和企业级应用程序中。然而,由于 Redis 提供了非常强大的功能和灵活性,因此它也存在着一些安全风险。在本文中,我们将概述 Redis 安全问题,并介绍一些应对策略。Redis 安全问题概述未授权访问Redis 默认情况下不

向阳逐梦 向阳逐梦 2023-07-17
0 0 0
双十一大促是怎么做MySQL热点数据高效更新的?

双十一大促是怎么做MySQL热点数据高效更新的?

MySQL的热点数据更新问题,一直都是行业内的一个难题,对于秒杀场景至关重要。一旦处理不好,就可能会导致数据库被打垮。通常来说,对于热点问题,都是选择使用Redis来抗,比如秒杀场景借助他的单线程高并发能力来做预扣减。常规方案但是,引入Redis又会带来数据不一致的问题,进而会导致超卖和少卖,如果一

大猫 大猫 2023-07-17
0 0 0
Redis Sorted Set 底层实现原理深度解读与排行榜实战

Redis Sorted Set 底层实现原理深度解读与排行榜实战

我是码哥,可以叫我靓仔。今天给大家简单聊聊 Redis Sorted Set 数据类型底层的实现原理和游戏排行榜实战。特别简单,一点也不深入,也就 7 张图,粉丝可放心食用,哈哈哈哈哈~~~~。1、是什么Sorted Sets 与 Sets 类似,是一种集合类型,集合中不会出现重复的数据(membe

竹子爱熊猫 竹子爱熊猫 2023-07-17
0 0 0
一文带你全面理解向量数据库

一文带你全面理解向量数据库

作者丨Leonie Monigatti译者丨朱先忠审校丨重楼近些年来,向量数据库引起业界的广泛关注,一个相关事实是许多向量数据库初创公司在短期内就筹集到数百万美元的资金。你很可能已经听说过向量数据库,但也许直到现在才真正关心向量数据库——至少,我想这就是你现在阅读本文的原因……如果你阅读本文只是为了

剑圣无痕 剑圣无痕 2023-07-17
0 0 0
redis主从复制+sentinel集群(3.0.2版本)

redis主从复制+sentinel集群(3.0.2版本)

1.Redis主从介绍 主从服务就是用户在主服务器写入数据后,从服务器在写一份数据,一般用在如下场景: 1、辅助实现备份 2、高可用(主从复制只是redis高可用的前提) 3、异地容灾 4、分摊负载 redis主从特点介绍: 1、redis使用异步复制,从服务器会以每秒一次的频率向主服务器报告复制流

大树 大树 2023-07-16
0 0 0
nosql——redis详解

nosql——redis详解

1.Redis概述 Redis是一个开源的使用c语言编写、支持网络、可持久化的日志性、key-value数据库,并提供多种语言的API,使用起来很方便。 Redis和memcached很像,但是redis支持的数据存储类型比memcached更丰富,包括strings(字符串)、lists(列表)、

穿过生命散发芬芳 穿过生命散发芬芳 2023-07-16
0 0 0
mysql主从一致性检查&修复

mysql主从一致性检查&修复

1.前言 在mysql数据库主从环境,总会出现各种原因,导致数据库主从环境的不一致;本文就是介绍在mysql数据库主从出现了不一致的情况,如何进行修复,保持数据的一致性。 本文使用:percona-toolk,这个工具包提供pt-table-checksum(检查数据),pt-table-sync修

捡田螺的小男孩 捡田螺的小男孩 2023-07-16
0 0 0
zabbix+percona的插件监控MySql

zabbix+percona的插件监控MySql

1.前言 前段时间用了下zabbix+percona的插件监控MySql,感觉不错,内置了190多个监控项,40多个图形展示。对MySql的监控比较全面,自己导入模版之后稍微根据自己的需求进行修改就可以使用。 https://www.percona.com/doc/percona-monitorin

向阳逐梦 向阳逐梦 2023-07-16
0 0 0
memcached复制+keepalived高可用架构

memcached复制+keepalived高可用架构

1.memcached高可用架构介绍 1.服务器端实现memcached复制 2.使用keepalived产生VIP连接主数据库 3.程序配置的memcached服务器是VIP 1.1.keepalived+memcached主主复制高可用介绍 Keepalived+memcached主主复制高可

大白菜程序猿 大白菜程序猿 2023-07-16
0 0 0
memcached分布式路由算法介绍及部署

memcached分布式路由算法介绍及部署

1.Memcached介绍 Memcache是一套开源,高性能的分布式的内存对象缓存系统,目前被许多网站使用以提高网站的访问速度,尤其是一些大型的、需要频繁访问数据库的网站访问速度提升效果十分显著。 1.1.Memcached对比redis 个人认为:Memcached和redis最大的区别就是两点

法医 法医 2023-07-16
0 0 0
1 … 1,194 1,195 1,196 1,197 1,198 … 1,807