未分类 Hive数据类型 3.1 基本数据类型 Hive数据类型 Java数据类型 长度 例子 TINYINT byte 1byte有符号整数 20 SMALINT short 2byte有符号整数 20 INT int 4b... 03月05日 188 views 发表评论 阅读全文
未分类 Hive安装部署和相关操作 Hive安装环境准备 2.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confl... 03月04日 188 views 发表评论 阅读全文
未分类 Linux mysql5.5 安装 MySQL安装配置 官网下载地址 https://dev.mysql.com/downloads/file/?id=471503 mysql-5.7.19-1.el7.x86_64.rp... 03月04日 180 views 发表评论 阅读全文
未分类 Flume各种拦截器(二)——正则和自定义拦截器 查询替换拦截器 search.conf #1 agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 #2 source a1.sour... 03月02日 196 views 发表评论 阅读全文
未分类 Flume各种拦截器(一) 时间戳拦截器 Timestamp.conf #1.定义agent名, source、channel、sink的名称 a4.sources = r1 a4.channels = c1 a4.sinks ... 03月02日 199 views 发表评论 阅读全文
未分类 多Flume传输到单Flume 目标:flume11监控文件hive.log,flume-22监控某一个端口的数据流,flume11与flume-22将数据发送给flume-33,flume33将最终数据写入到HDFS。 分步实现:... 03月02日 262 views 发表评论 阅读全文
未分类 Flume N对N设置 目标:使用flume1监控文件变动,flume1将变动内容传递给flume-2,flume-2负责存储到HDFS。同时flume1将变动内容传递给flume-3,flume-3负责输出到local 分... 03月02日 183 views 发表评论 阅读全文
未分类 Flume(二) 监控文件夹: 尖叫提示: 在使用Spooling Directory Source时 1) 不要在监控目录中创建并持续修改文件 2) 上传完成的文件会以.COMPLETED结尾 3) 被监控文件夹每5... 02月28日 152 views 发表评论 阅读全文
未分类 Flume搭建和简介(一) 配置: 上传,解压 进入conf 在flume.env.sh下面引入JAVA_HOME export JAVA_HOME=/opt/module/jdk1.8.0_144 conf文件夹同级创建一个j... 02月27日 173 views 发表评论 阅读全文
未分类 Zookeeper+Yarn高可用(自动切换) yarn-site.xml同步更新其他节点的配置信息(configure整个复制粘贴,可对比查看前后) <configuration> <property> &l... 02月27日 315 views 发表评论 阅读全文