大数据(笔记)

4月16日

大数据:

 大数据技术:

 

1,磁道寻道

2,LSM树与B-树

3,HBase写数据,

   (1)先将数据写到WAL中

    (2)WAL存放在HDFS之上AL

    (3)每次Put,Delete操作的数据均追加道WAL末端

    (4)持久化到WAL之后,在写到MemStorc中

    (5)两者写完返回ACK到客户端

 

HBASE Compaction机制

HBASE的参数配置

Rowkey:

HBase的生态:

数据分析:

时空数据库:

 时序数据库:

 (二)4月17日

1,

 

 hadoop的MR程序:

 

MR处理几句话中相同单词的流程:

 4月18日

原文地址:https://www.cnblogs.com/lq13035130506/p/10720711.html