3.1 基本数据类型 Hive数据类型 Java数据类型 长度 例子 TINYINT byte 1byte有符号整数 20 SMALINT short 2byte有符号整数 20 INT int 4b...
Hive安装部署和相关操作
Hive安装环境准备 2.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confl...
Linux mysql5.5 安装
MySQL安装配置 官网下载地址 https://dev.mysql.com/downloads/file/?id=471503 mysql-5.7.19-1.el7.x86_64.rp...
Flume各种拦截器(二)——正则和自定义拦截器
查询替换拦截器 search.conf #1 agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 #2 source a1.sour...
Flume各种拦截器(一)
时间戳拦截器 Timestamp.conf #1.定义agent名, source、channel、sink的名称 a4.sources = r1 a4.channels = c1 a4.sinks ...
多Flume传输到单Flume
目标:flume11监控文件hive.log,flume-22监控某一个端口的数据流,flume11与flume-22将数据发送给flume-33,flume33将最终数据写入到HDFS。 分步实现:...
Flume N对N设置
目标:使用flume1监控文件变动,flume1将变动内容传递给flume-2,flume-2负责存储到HDFS。同时flume1将变动内容传递给flume-3,flume-3负责输出到local 分...
Flume(二)
监控文件夹: 尖叫提示: 在使用Spooling Directory Source时 1) 不要在监控目录中创建并持续修改文件 2) 上传完成的文件会以.COMPLETED结尾 3) 被监控文件夹每5...
Flume搭建和简介(一)
配置: 上传,解压 进入conf 在flume.env.sh下面引入JAVA_HOME export JAVA_HOME=/opt/module/jdk1.8.0_144 conf文件夹同级创建一个j...
Zookeeper+Yarn高可用(自动切换)
yarn-site.xml同步更新其他节点的配置信息(configure整个复制粘贴,可对比查看前后) <configuration> <property> &l...