之前我们看了HBase 集群的搭建，如下： Hbase 2.1.3 集群搭建手册 https://www.cndba.cn/dave/article/3322 本篇我们了解一下HBase Shell及其常见操作。 1 HBase Shell 概述 HBase包含可以与HBase进行通信的Shell。 HBase使用Hadoop文件系统来存储数据。它拥有一个主服务器和区域服务器。数据存储将在区域(表)的形式。这些区域被分割并存储在区...
2019-03-06 01:29 2237 0
搭建好HBase 集群后，各种后台进程都正常，搭建手册参考： Hbase 2.1.3 集群搭建手册 https://www.cndba.cn/dave/article/3322 但是通过web访问，却报如下错误： 2019-03-05 23:13:49,508 WARN [qtp1911600942-82] servlet.ServletHandler: /master-status java.lang.IllegalArgumentException: org.apache.hbase.thirdparty.com.google.proto...
2019-03-05 23:45 5147 0
在上篇我们了解了HBase 架构相关的内容，如下： HBase 系统架构详解 https://www.cndba.cn/dave/article/3315 本篇了解一下HBase集群环境的搭建。 1 Hadoop 集群和ZooKeeper集群搭建 因为HBase依赖与HDFS和Zookeeper环境，所有在搭建HBase集群之前需要先安装这2个环境，这里不在说明，具体操作参考之前的博客。 Linux 7.6 平台 Hadoop 3.1.1 集...
2019-03-05 17:17 4464 0
搭建HBase 集群，执行启动命令后，住HMaster 进程无法启动，只有back-Masters配置中的可以启动。 查看日志如下： 2019-03-05 20:37:56,379 INFO [master/hadoopslave1:16000:becomeActiveMaster] coordination.SplitLogManagerCoordination: Found 0 orphan tasks and 0 rescan nodes 2019-03-05 20:37:56,456 INFO [ReadOnlyZKClient-hadoop...
2019-03-05 13:07 6392 0
搭建好HBase 集群后，启动HMaster进程后，不久HMaster进程异常结束，查看Master日志，如下： 2019-03-05 20:36:20,586 INFO [main] ipc.RpcServerFactory: Creating org.apache.hadoop.hbase.ipc.NettyRpcServer hosting hbase.pb.MasterService, hbase.pb.RegionServerStatusService, hbase.pb.L ockService, hbase.pb.HbckService, hbase.pb...
2019-03-05 13:00 3654 0
关闭HBase时，如果直接执行stop-hbase.sh命令，那么会一直处于等待状态，如下： [dave@www.cndba.cn conf]$ stop-hbase.sh stopping hbase.............................................................. .^M.^M^C 解决方法，先手工关闭HMaster，在关闭HBase集群就没有出现这种情况了，如下： [dave@www.cndba.cn conf]$ hbase-daemon....
2019-03-04 22:06 6920 0
Hbase 启动后十几秒进程异常退出，日志如下： [hadoop@Slave1 logs]$ pwd /home/hadoop/hbase/logs [hadoop@Slave1 logs]$ tail -500 hbase-hadoop-master-Slave1.log^C 2019-03-04 00:44:45,899 INFO [main] zookeeper.ZooKeeper: Initiating client connection, connectString= Master:2181, Slave1:2181, Slave2:2181 sessionTimeout
2019-03-04 00:57 4836 0
1 HBase 系统架构图 架构图中的组件说明如下。 1.1 Client 使用HBase RPC机制与HMaster和HRegionServer进行通信 。 Client与HMaster进行通信进行管理类操作。 Client与HRegionServer进行数据读写类操作 。 1.2 Zookeeper Zookeeper是HBase Master的HA解决方案。Zookeeper保证了至少有一个HBase Master 处于运行状态，避免HMaste...
2019-03-03 22:10 2049 0
2019-03-03 20:19 2082 0
自1970年以来，关系数据库用于数据存储和维护有关问题的解决方案。大数据的出现后，好多公司实现处理大数据并从中受益，并开始选择像 Hadoop 的解决方案。 Hadoop使用分布式文件系统，用于存储大数据，并使用MapReduce来处理。Hadoop擅长于存储各种格式的庞大的数据，任意的格式甚至非结构化的处理。 1 Hadoop的限制 Hadoop只能执行批量处理，并...
2019-03-03 20:17 1972 0
1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询—因为它只能够在Haoop上批量的执行Hadoop。 Apache HBase是一种Key/Value系统，它运行在HDFS之上。和...
2019-01-19 00:08 2395 0
人的一生应该是这样度过的：当他回首往事的时候，他不会因为虚度年华而悔恨，也不会因为碌碌无为而羞耻；这样，在临死的时候，他就能够说：“我的整个生命和全部精力，都已经献给世界上最壮丽的事业....."
ACE 搜索
中国ORACLE用户组
中国DBA联盟（ACDU）· 核心伙伴
墨天轮 · MVP
CNDBA_2: 142216823(2k群)
CNDBA_3: 283816689(2k群)
CNDBA_4: 391125754
CNDBA_5: 104207940
CNDBA_6: 62697977
CNDBA社区
