Hive和HBase的区别
0x01 两者分别是什么？Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询–因为它只能
...
hadoop生态圈介绍
hadoop 生态概况
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。
用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。
具有可靠、高效、可伸缩的特点。
Hadoop的核心是YARN,HDFS和Mapreduce
下图是h
...
docker 容器开启自动启动
服务器系统: CentOS7
docker服务开机自动启动：
systemctl enable docker.service
容器自动启动：
docker update --restart=always 容器名称
mac下配置iterm2支持rz/sz命令
brew install lrzsz
如果找不到lrzsz，使用以下命令更新brew库：brew update
下载zmoden脚本
在https://github.com/mmastrac/iterm2-zmodem上将iterm2-send-zmodem.sh 和 iterm2-recv
...
RabbitMQ性能测试
单机测试4 coro 8G CentOS7 虚拟机
16进程 8线程 100000/线程 3k/包 8消费者 持久化
包速率：9000pkt/s 数据速率：24M/s
16进程 8线程 100000/线程 1024k/包 8消费者 持久化
包速率：100pkt/s 数据速率：100M
...
RabbitMQ集群搭建
集群模式普通模式默认的集群模式
RabbitMQ集群中节点包括内存节点、磁盘节点。内存节点就是将所有数据放在内存，磁盘节点将数据放在磁盘上。如果在投递消息时，打开了消息的持久化，那么即使是内存节点，数据还是安全的放在磁盘。那么内存节点的性能只能体现在资源管理上，比如增加或删除队列（queue），虚拟
...
Docker学习笔记
#0x01 简介
Docker是一个由GO语言写的程序运行的“容器”，简单理解就是一个轻量级的虚拟化技术。Docker可以解决虚拟机能够解决的问题，同时也能够解决虚拟机由于资源要求过高而无法解决的问题。Docker能处理的事情包括：
Ø 隔离应用依赖
Ø 创建应用镜像并进行复制
Ø 创建容易分发
...
关于日志分析系统并发的一些思考
起因最近零信任系统终于做完了，能休息一下了 ~_~ 呼~
在做的这个零信任系统里面，有一部分是需要对大量的日志进行采集，分析出用户登录的实时信息，幻化成一条条链接（或者叫会话）。其实叫什么也好，目的就是要在大量的日志中得到用户和IP地址的映射关系。
当然，本文并不是想讲关于零信任怎么做或者是用户链
...