kafka partition(分区)与 group

https://www.cnblogs.com/liuwei6/p/6900686.html

 

一、

1、原理图

2、原理描述

一个topic 可以配置几个partition,produce发送的消息分发到不同的partition中,consumer[……]

继续阅读

HBase中为什么要有Column Family

https://zhidao.baidu.com/question/873748003465757012.html

 

HBase本身的设计目标是支持稀疏表,而稀疏表通常会有很多列,但是每一行有值的列又比较少。
如果不使用Column Family的概念,那么有两种设计方案:[……]

继续阅读

Hadoop集群之 ZooKeeper和Hbase环境搭建

https://blog.csdn.net/peace1213/article/details/51336369

 

所有软件下载百度云 密码:uup8

讲在开头:对于笔者的完全分布式环境请见该文:Hadoop完全分布式安装

1.ZooKeeper和Hbase的简答介绍:

    [……]

继续阅读

HBase详细概述

https://blog.csdn.net/u010270403/article/details/51648462

 

本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理存储、HBase系统架构,HBase调优、H[……]

继续阅读

Hbase系统架构及数据结构

https://blog.csdn.net/cnbird2008/article/details/9151585

 

HBase中的表一般有这样的特点:

1 大:一个表可以有上亿行,上百万列

2 面向列:面向列(族)的存储和权限控制,列(族)独立检索。

3 稀疏:对于为空(n[……]

继续阅读

java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries

https://www.cnblogs.com/hyl8218/p/5492450.html

 

在已经搭建好的集群环境Centos6.6+Hadoop2.7+Hbase0.98+Spark1.3.1下,在Win7系统Intellij开发工具中调试Spark读取Hbase。运行[……]

继续阅读

Centos 7 离线安装Cloudera Manager5 和CDH5.13.0

http://blog.csdn.net/tx_smile/article/details/78338110

 

这两天终于是把这个Hadoop集群搭起来了,从装系统到最终成功真是曲折,中间遇到了各种奇葩的问题,比如网太卡了,yum一直访问不了服务器,而我以为某个地方配置失败,[……]

继续阅读

Centos7 CM5和CDH5(5.9.0) 离线安装

http://blog.csdn.net/myself_way/article/details/54864651

 

Centos7 CM5和CDH5(5.9.0) 离线安装

  • 概述
  • 文件下载
  • 环境搭建
  • 安装Cloudera Manger
  • 日志查看
  • [……]

继续阅读

Centos 7安装CDH 5.13.0总结

#/usr/bin/bash
#所有节点
#关闭防火墙
systemctl stop firewalld.service
systemctl disable firewalld.service
firewall-cmd --state
 
#关闭selinux
/usr/sbin/s[......]

继续阅读

CDH5.7.2-Hadoop集群CentOS7下的搭建(离线安装)

http://blog.csdn.net/shawnhu007/article/details/52579204

 

说明:在本地虚拟机环境中进行CDH5.7.2集群的搭建,在搭建之前请先在虚拟机上装好三台CentOS7,三台内存分别为8g,2g,2g,博客为原创,转载[……]

继续阅读