冷热数据分离的目的
1、ES集群异构，机器硬件资源配置不一，有高性能CPU和SSD存储集群，也有大容量的机械磁盘集群，比如我们的场景就是存放冷数据的集群，服务器都是多年前买的一批满配的4T Dell R70，但是新扩容的热节点机器均为DELL 高性能SSD磁盘和CPU的R740机...
1年前 (2020-06-27) 3114℃
6喜欢
Codis 介绍
简介
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有显著区别 (有一些命令不支持), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请...
3年前 (2018-11-14) 4030℃
3喜欢
neo 4j 介绍
neo4j 是世界领先的开源图数据库。它完全由java语言编写实现，具有高可用性，可伸缩性，可以轻易扩展到上亿级别的节点和关系，通过遍历工具高速检索数据。
因为阐述图数据库概念需要大量篇幅，所以本文不做过多解释。详细内容可以查询neo4j中文手册：http:/...
3年前 (2018-07-15) 5242℃
0喜欢
前言
我们公司数据库这段时间由于数据量过大，导致备份的时间过长，一次全量备份的备份时间从凌晨12点到了早上八九点，这个时间段备份还没有结束就会占用服务器大量的网络和磁盘io，导致出现很多慢查询，影响到用户体验。这时我们就上mysql延迟复制技术，来解决mysql备份时间过长的问题...
3年前 (2018-03-31) 4175℃
0喜欢
问题
今天添加了一个mysql5.7的 slave数据库，部署完成之后，启动新部署的slave一切正常，但是收到了老slave数据库的主从同步报警。
登陆故障数据库查询到，Mysql主从同步报错如下
Last_IO_Error: Got fatal error 1236 from...
3年前 (2018-03-29) 8285℃
3喜欢
前言
在执行elasticsearch查询的时候，有些查询会占用大量的资源导致响应很慢，这个时候就需要ES对慢查询进行监控。找到那些响应很慢的请求。ES的请求主要分为搜索和索引，ES也分别提供了这两种类型请求的慢查询日志。
搜索慢日志
慢搜索日志配置可以记录响应慢的搜索（查询和获...
3年前 (2018-03-16) 11639℃
1喜欢
前言
mysql作为互联网公司都会用到的数据库，如果在使用过程中出现性能问题，会采用mysql的横向扩展，使用主从复制来提高读性能，要是解决写入问题，需要进行分库分表。本文不会去介绍mysql的高可用，主要介绍mysql的访问中间件（DAL）的一些实现方案。
Atlas
官网：h...
5年前 (2017-02-12) 11022℃
0喜欢
前言
mysql作为应用程序的数据存储服务，要实现mysql数据库的高可用。必然要使用的技术就是数据库的复制，如果主节点出现故障可以手动的切换应用到从节点，这点相信运维同学都是知道，并且可以实现的。但是这种情况只是手动的切换，对可用性有要求的业务需要分别实现主库和从库的高可用，保...
5年前 (2017-02-12) 6078℃
0喜欢
前言
运维工程师在工作中一定会使用到mysql数据库的主从复制，那么肯定会有扩展从库的需求，比如数据库当前吞吐量比较大或者需要单独加一台从库做专门的数据分析。那么生产环境如何添加mysql从库，就是本文要说明的内容。
前提
在添加mysql的从库的时候，从库需要先导入一次主库的全...
5年前 (2017-01-14) 5999℃
2喜欢
前言
作为运维，在和开发人员调试mysql数据库故障的时候，你一定碰到过这样的需求，就是输出mysql执行的所有语句，用来分析问题。默认情况下mysql记录语句的执行只是开启了binlog日志，但是binlog不会记录select语句，这个时候就需要打开数据库的general l...
5年前 (2016-12-18) 7570℃
2喜欢
