思维要走到多数人的前面,甚至是对立面

[置顶] 交易的道与术(一)

业绩拐点:合同负债(签了了合同没拿到钱)大增,现金流也保持的比较 设立交易系统的基础 要盈利,前提先要学会少亏 除非是穿越或者神,否则无人可以推翻这句话:“市场是不可能被持续准确预判”。许多投资者,比如那些经常询问是否现在是牛市、是否可以买入、买入后应持有多久的人,他们的潜意识里只...

[置顶] 经典美句收录集合

更新1015 寒窑赋 吕蒙正是北宋初年宰相,出身贫寒,曾一度落魄到寄居寒窑、以乞讨为生的地步,后发奋读书,官至极品。相传此文是他为劝诫当时年少气盛的太子(即后来的宋真宗)而作,太子阅后深受触动,一改傲慢态度。 (宋)吕蒙正 天有不测风云,人有旦夕祸福。 蜈蚣百足,行不及蛇;雄鸡...

HBase RegionServer核心模块

RegionServer内部结构 HLog MemStore HFile BlockCache

HBase 负载均衡


HBase 读写流程

写入流程 BulkLoad功能(批量数据加载) 读取流程 深入理解Coprocessor(协处理器)

HBase 客户端


HBase Compaction实现


HBase 依赖服务Zookeeper

HBase依赖服务 HBase并不是一个独立的无依赖的项目。在正常的线上集群上,它至少依赖于ZooKeeper、HDFS两个Apache顶级项目。 对于某些特殊场景,例如Copy Snapshot和验证集群间数据一致性等,还需要借助Yarn集群的分布式计算能力才能实现。 正是借助了Apach...

HBase 数据结构与算法

HBase的一个列簇(Column Family)本质上就是一棵LSM树(Log-Structured Merge-Tree)。LSM树分为内存部分和磁盘部分。内存部分是一个维护有序数据集合的数据结构。 一般来讲,内存数据结构可以选择平衡二叉树、红黑树、跳跃表(SkipList)等维护有序集的...

HBase 数据模型

从使用角度来看,HBase包含了大量关系型数据库的基本概念——表、行、列,但在BigTable的论文中又称 HBase为“sparse,distributed,persistent multidimensional sorted map”,即HBase本质来看是一个Map。 那HBase到底是...

HBase 软件架构

架构图 HBase体系结构借鉴了BigTable论文,是典型的Master-Slave模型。系统中有一个管理集群的Master节点以及大量实际服务用户读写的RegionServer节点。 除此之外,HBase中所有数据最终都存储在HDFS系统中,这与BigTable实际数据存储在GFS中相对...

HBase 快速启动

独立式HBase 在一个独立的HBase实例中,它具有所有的HBase系统服务程序:Master、RegionServers 和 ZooKeeper(在一个持续到本地文件系统的单一 JVM 中运行)。这是我们最基本的部署配置文件。 ~在HBase 0.94.x之前,HBase预计环回IP地...

HBase Shell操作

命令行客户端操作 # bin/hbase shell list // 查看表 status // 查看集群状态 version // 查看集群版本 # 建表 # 表名、列族名、列族名 create 't_user_info','base_info','extra_info'...

HBase 介绍

HBase 概述 HBase是Hadoop的生态系统,是建立在Hadoop文件系统(HDFS)之上的分布式、面向列的数据库,利用了Hadoop的文件系统提供容错能力。 如果你需要进行实时读写或者随机访问大规模的数据集的时候,请考虑使用HBase! HBase作为Google Bigtabl...

RequireJS - 入门指南、进阶使用详解

现在项目大都使用模块化开发,而 RequireJS 作为 AMD 模块开发的典范,还是很值得学习使用的。 AMD 规范 AMD 基本介绍 AMD 全称为 Asynchromous Module Definition(异步模块定义) AMD 是 RequireJS 在推广过程...

HDFS特性-用户授权代理ProxyUser

Hadoop权限认证管理用户指南 介绍 Hadoop2.0版本开始支持ProxyUser的机制。含义是使用User A的用户认证信息,以User B的名义去访问hadoop集群——用户授权代理认证服务,可以简单抽象到角色赋值过程。 对于服务端来说就认为此时是User B在访问集群,相应对访...

Ambari-搭建大数据平台

Ambari-搭建大数据平台 Ambari-搭建大数据平台 CentOS-7.2安装Ambari-2.4.2 Ambari安装(CentOS6.5) 我遇到的问题 JDK版本问题: INFO 2018-08-15 00:12:47,330 hostname.py:67 -...