Articles published by ruki_in_HDU

  1. Home
  2. ruki_in_HDU

数据仓库 — 07_Kafka的安装与部署（Kafka命令行操作指令、Kafka集群群起脚本、压力测试、节点数量计算）

1 Kafka的安装与配置将kafka_2.11-0.11.0.2.tgz上传至102机器/opt/software目录下，并解压安装至/opt/module，重命名为kafkatar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/mv kafka_2.11-0.11.0.0/ kafka在/opt/module/kafka创建logs文件夹mkd...

  • ruki_in_HDU
  • May 13, 2020
  • 1 comments
    •

    牛客数据库SQL实战 41-50（数据替换replace(字段,oldval,newval)、添加主键、获取两表交集intersect、获取字符串长度length(str)）

    41 删除emp_no重复的记录，只保留最小的id对应的记录41.1 题目描述删除emp_no重复的记录，只保留最小的id对应的记录。CREATE TABLE IF NOT EXISTS titles_test ( id int(11) not null primary key, emp_no int(11) NOT NULL, title varchar(50) NOT NULL, fro...

  • ruki_in_HDU
  • May 13, 2020
  • No comments
    •

    数据仓库 — 06_Flume的安装与部署（Flume组成框架、Agent内部原理、安装配置、日志采集配置文件、拦截器的编写、Flume群起脚本、Flume启动报错解决）

    1 概述1.1 Flume定义Flume 是Cloudera 提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume 基于流式架构，灵活简单。Flume最主要的作用：实时读取服务器本地磁盘的数据，将数据写入到HDFS1.2 Flume组成架构1.2.1 AgentAgent 是一个JVM 进程，它以事件的形式将数据从源头送至目的，==是Flume 数据传输的基本单元...

  • ruki_in_HDU
  • May 12, 2020
  • No comments
    •

    牛客数据库SQL实战 31-40（explain查看执行计划、concat字符串拼接、insert ignore/replace、创建索引、创建视图、强制索引FORCE INDEX、构造触发器）

    31 获取select * from employees对应的执行计划31.1 题目描述获取select * from employees对应的执行计划31.2 题解 explainexplain select * from employeesexplain模拟优化器执行SQL语句，在5.6以及以后的版本中，除过select，其他比如insert，update和delet...

  • ruki_in_HDU
  • May 12, 2020
  • No comments
    •

    牛客数据库SQL实战 21-30（23_27_表的复用）

    21 查找所有员工自入职以来的薪水涨幅情况21.1 题目描述查找所有员工自入职以来的薪水涨幅情况，给出员工编号emp_no以及其对应的薪水涨幅growth，并按照growth进行升序CREATE TABLE `employees` ( `emp_no` int(11) NOT NULL, `birth_date` date NOT NULL, `first_name` varchar(14)...

  • ruki_in_HDU
  • May 11, 2020
  • No comments