weixin_42821133的博客

Hbase如何批量删除指定数据有时我们需要批量删除一些hbase中符合某些条件的数据，本文提供一种简单的shell命令的方式批量删除hbase里的数据。思路就是，建立hive与hbase的关联表，通过hive sql查询出符合条件的数据rowkey导出到本地文件，然后通过hbase shell批量删除。示例如下:1 创建hbase 表#创建表名为“test:user_blacklist”,列簇名为“user”的hbase表#hbase 表create 'test:user_blacklist',

package com.enda;import java.util.ArrayList;import java.util.Iterator;import java.util.List;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.CellScanner;import org.apache.hadoop.hbase.H

在生产环境中很有可能有那么几个Region比较大，但是都运行在同一个Regionserver中。这个时候就需要手动将region移动到负载低的Regionserver中。步骤：1、找到要移动的region，记录红框的id值，这个是唯一的region ID2.查看RegionServer列表，并记录ip、端口、startcode#明显读请求不均衡3.我们需要将部分region移动到dn3这台RegionServer上。例如： mine:t_match_odds,"""""""",145699

首先我们简单回顾下整个写入流程client api ==> RPC ==> server IPC ==> RPC queue ==> RPC handler ==>write WAL ==> write memstore ==> flush to filesystem整个写入流程从客户端调用API开始，数据会通过protobuf编码成一个请求，通...

1.zookeeper：2.hadoop集群查查看namenode的信息：http://192.168.234.22:50070，查看namenode的信息和状态3.查看yarn资源的管理地址：http://192.168.234.21:8088（节点01的8088端口）4.HBase管理页面：hbase1.0之前版本是http://xxxxx:60010；1.0版本之后是16010端口，必...

今天启动HBase集群后查看集群节点没问题一切OK，Hmaster和HRegionServer都起来了，可是回头没几秒再次jps查询是却发现Hmaster就这么的没了看病先看症状：我立马去hbase日志查看了下（hbase日志在hbase安装目录下的log文件夹下）注意上面的报错关键字： Operation category READ is not supported in state s...

HBase列族高级配置转自：http://blog.sina.com.cn/s/blog_ae33b83901018euz.htmlHBase有几个高级特性，在你设计表时可以使用。这些特性不一定联系到模式或行键设计，但是它们定义了某些方面的表行为。本节我们讨论这些配置参数，以及你可以如何使用它们。1 可配置的数据块大小HFile数据块大小可以在列族层次设置。这个数据块不同于之前谈到的HD...