自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

wzy0623的专栏

数据库、数据仓库、大数据

原创 MySQL找出未提交事务的信息

目录 一、processlist中的未提交事务 二、information_schema.innodb_trx中的未提交事务 三、performance_schema.events_statements_current中的未提交事务 参考: 我们经常会碰到这样的情况,某个事务执行...

2020-03-28 08:14:05 301 0

原创 redis手工分片

目录 一、redis环境 二、redis手工分片步骤 1. 配置级联复制 2. 去掉老哨兵监控 3. 停止新实例从老实例的复制 4. 添加新哨兵监控 5. 重启新哨兵 6. 添加老哨兵监控 7. 重启老哨兵 随着数据量越来越大,一个redis实例可能需要分成多个以形成数...

2020-03-25 05:43:38 267 0

原创 在CDH 6.3.1上安装HAWQ 2.4.0

目录 一、安装环境 二、选择HAWQ主机 三、安装前准备 1. 建立gpadmin用户和HAWQ主目录 2. 创建HAWQ的本地数据目录 3. 安装依赖包 三、安装HAWQ 1. 下载安装包 2. 解压并安装 四、配置HAWQ 1. 创建HAWQ的HDFS数据目录 2. 修...

2020-03-13 17:41:38 579 1

原创 定期全备redis

首先申明我的观点,redis本身只是缓存,不适合作为数据库使用,有说微博就是拿redis当DB用的,自己去证实吧。如果非要拿redis当数据库,就不得不考虑数据丢失问题,这里讨论两种常见的可能造成数据丢失的情况。 第一种情况是redis实例或所在主机宕机,这可以通过复制来解决,再配以re...

2020-03-12 07:18:22 410 0

原创 CDH 6.3.1整合Zeppelin 0.8.2

Zeppelin是一个基于Web的笔记本,可以直接在浏览器中编写代码,对数据进行查询分析并生成报表或图表,做出数据驱动的、交互、协作的文档,并且可以共享笔记。Zeppelin提供了内置的Apache Spark集成,提供的功能有: 自动引入SparkContext 和 SQLContext 从...

2020-03-11 11:12:22 839 0

原创 在CDH 6.3中安装Phoenix服务

目录 一、下载并安装Phoenix parcel 二、安装CSD文件 三、在Cloudera Manager中添加Phoenix服务(前提是已经安装了HBase服务) 四、配置HBase以用于Phoenix 五、验证Phoenix安装 参考: 一、下载并安装Phoenix parce...

2020-03-10 08:04:44 1967 7

原创 用NC或rsync传文件和目录

目标机(172.16.1.125): nc -l 12345 | tar zxvf - 源机(172.16.1.124): tar cfz - * | nc 172.16.1.125 12345

2020-03-02 18:02:26 293 0

转载 MySQL百万级数据高效导入Redis

DBAplus社群今天 以下文章来源于侠梦的开发笔记,作者侠梦 前言 随着系统的运行,数据量变得越来越大,单纯的将数据存储在MySQL中,已然不能满足查询要求了,此时我们引入Redis作为查询的缓存层,将业务中的热数据保存到Redis,扩展传统关系型数据库的服务能力,用户通过应用直接从Red...

2020-03-02 16:16:50 581 0

提示
确定要删除当前文章?
取消 删除