Hbase 使用场景及案例

Hbase特点 1. 高速写入:高速写入,对读取需求比较小。 2. 大数据:分布式存储,海量数据搞得定。不用担心无限增长的数据。 3. 可靠:写入的不是内存,是硬盘,高性能 4. 查询简单:不需要复杂查询条件来查询数据的应用,HBase只支持基于rowkey的查询,对于HBase来说,单条记录或者小范围的查询是可以接受的。 Hbase使用场景1:对象存储 我们知道不少的头 More


php 操作Hbase函数手册

$tablename='test'; $atrribute = array(); 1.写入数据 $row = 'stu1'; //行名字 $mutations = array( new Mutation(array( 'column' => 'cf:math', 'value' => '90' )), ); try { $client->mutateRow($tablename, $row, $mutations, $atrribute); } catch (Exception $e) { var_dump($e);//这里自己打log } More


HBase写入性能测试VS单机文件

本文测试Hbase写入和系统文件写入性能比较 测试背景: 月小升曾经用文件系统做了个简单的数据监测系统,简单监测商品的曝光和点击。就是把客户浏览的商品ID,cookie之类数据一次一条的写在文件里。后期用java去读那个文件。想着Hbase会不会好一些。 大规模写入测试: 1. 如果写入100000次,少了行数,说明并发报错了。 2. 写入hbase没少,说明没错误 More


Hbase数据例子,及shell操作例子

做个例子来理解下HBase的数据组织模式 学生成绩单,用name作为一个行键,sex作为一个列族,成绩作为一个列族 说明:列族必须在建立表的时候就固定,后面无法扩展新增,子列可以新增 1. 建立一个表stu, 包含列族为sex,score create 'stu','sex','score' 2. 按设计的表,增加值 put 'stu','lucy','sex:','1' put 'stu','lucy','score:chinese', More


Hbase 命令行 shell基础

第一部分:Hbase基础查看 1. Hbase版本查看 hbase(main):008:0> version 2.2.3, r6a830d87542b766bd3dc4cfdee28655f62de3974, 2020年 01月 10日 星期五 18:27:51 CST Took 0.0002 seconds 2. Hbase状态查看命令shell hbase(main):009:0> status 1 active master, 0 backup masters, 1 se More


php调用Hbase 通过thrift

系统版本: CentOS 7.4 JAVA_HOME: /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.242.b08-0.el7_7.x86_64 Habse路径: /backup/soft/hbase-2.2.3 Thrift路径: /backup/soft/thrift-0.13.0 PHP版本:php 5.6 第一步:配置Hbase 参考https://java-er.com/blog/danji-hbase-install-command/ mkdir -p /backup/soft/hbase-2.2.3/data chmod -R 777 /backup/ More


安装thrift

版本:thrift-0.13.0 安装成功的机器: CentOS Linux release 7.4.1708 (Core) 安装失败的机器: MacBook Pro MacOS High Sierra Version 10.13.6 (17G10021) 2.9 GHz Intel Core i5 想着用php调用HBase, 查了不少教程都是关于thrift的。所以安装一下 第一步:下载安装包 http://archive.apache.org/dist/thrift/ 2019年10月的最新版本为thri More


单机Hbase安装及基本命令

下载stable版本 http://www.apache.org/dyn/closer.cgi/hbase/ 我下载的时候hbase-2.2.3-bin.tar.gz tar -zvxf hbase-2.2.3-bin.tar.gz cd hbase-2.2.3 决定将HBase写入到哪里目录 vi conf/hbase-site.xml hbase.rootdir /Users/ge/mysoft/hbase-2.2.3/data 设置JAVA_HOME export JAVA_HOME=$(/usr/li More