今天,又是充满希望的一天~
1 日志生成1.1 日志启动参数说明// 参数一:控制发送每条的延时时间,默认是0 Long delay = args.length > 0 ? Long.parseLong(args[0]) : 0L; // 参数二:循环遍历次数 int loop_len = args.length > 1 ? Integer.parseInt(args[1]) : 1000;将生成的jar...
1 Zookeeper概述1.1 简介Zookeeper 是一个开源的分布式的,为分布式应用提供协调服务的 Apache 项目从设计模式来理解:Zookeeper是一个基于观察者模式设计的分布式服务管理框架,负责存储和管理大家都关心的数据,然后接手观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相关的反应。Zookeepe...
1 安装hadoop1.1 将hadoop导入到/opt/software中我使用xftp实现文件上传1.2 安装hadoop解压tar -zxvf hadoop-2.7.2.tar.gz -C /opt/module/1.3 添加hadoop环境变量在/etc/profile.d/env.sh中添加hadoop环境变量##HADOOP_HOME export HADOOP_HOME=/o...
1 Hadoop运行环境搭建1.1 修改虚拟机的静态ip并克隆参考文章:vmware centos6 设置静态IP地址本机集群ip:主机iphadoop102192.168.222.102hadoop103192.168.222.103hadoop104192.168.222.104修改网卡vim /etc/udev/rules.d/70-persistent-net.rules如果有两个配...
1 数据仓库的概念数据仓库(Data Warehouse),是为企业所有决策制定过程,提供所有系统数据支持的战略集合。通过对数据仓库中数据的分析,可以帮助企业,改进业务流程、控制成本、题号提高产品质量等。数据仓科,并不是数据的最终目的地,而是为数据最终的目的地做好准备。这些准备包括对数据的:清洗、转义、分类、重组、合并、拆分、统计等等。2 项目需求分析用户行为数据采集平台搭建业务数据采集平台...