Every day to be a little better

2018年03月的文章

big data

Yarn

admin阅读(280)评论(0)

Yarn Yarn 外围有很多插件,yarn为各种插件提供一个最基本的服务,来利用底层最基本的设置资源,以尽可能最大利用率的方式调动整体资源。 动态: 动态分配资源分配 Yarn : 集群操作系统 JobTracker :资源管理、作业调度...

big data

Hive实战操作

admin阅读(345)评论(0)

Hive实战操作 mysql配置安装: 安装: mysql / mysql-server yum install -y mysql yum install -y mysql-server /etc/init.d/mysqld start 安...

big data

Flume

admin阅读(273)评论(0)

Flume 简介 Apache软件基金顶级项目 Apache Flume是一个分布式、可信任的弹性系统,用于高效收集、汇聚和移动大规模日志信息从多种不同的数据源到一个集中的数据存储中心(HDFS、HBase) 功能: 支持在日志系统中定制各...

big data

Hive

admin阅读(213)评论(0)

Hive 背景 – 引入原因: – 对存在HDFS上的文件或HBase中的表进行查询时,是要手工写一堆MapReduce代码 – 对于统计任务,只能由动MapReduce的程序员才能搞定 – ...