未分类 Flume搭建和简介(一) 配置: 上传,解压 进入conf 在flume.env.sh下面引入JAVA_HOME export JAVA_HOME=/opt/module/jdk1.8.0_144 conf文件夹同级创建一个j... 02月27日 4,131 views 发表评论 阅读全文
未分类 Zookeeper+Yarn高可用(自动切换) yarn-site.xml同步更新其他节点的配置信息(configure整个复制粘贴,可对比查看前后) <configuration> <property> &l... 02月27日 1,773 views 发表评论 阅读全文
未分类 Zookeeper+Hadoop高可用(自动切换) 在所有机器hdfs-site.xml中增加 <property> <name>dfs.ha.automatic-failover.enabled</name... 02月27日 2,081 views 1 阅读全文
未分类 hadoop完全分布式搭建(重新整理) 完全分布式搭建 在前面单机版搭建成功的基础上: 修改网卡地址并重启网卡: 重启网卡 service newtork restart 设置主机名: hostnamectl set-host... 02月26日 2,781 views 发表评论 阅读全文
未分类 Zookeeper+Hadoop高可用(手动切换) 创建一个HAtest文件,可以循环创建 mkdir -vp /opt/module/HA 复制或者解压一个过去(此处是从前面分布式直接复制):cp -r hadoop2.8.4 HA 配置java环... 02月24日 1,188 views 发表评论 阅读全文
大数据 zookeeper搭建 所谓的奇数台服务器是根据配置文件来的。 剩下机器不超过半数则全部Not running 搭建: 复制文件到/opt/module/中 zk目录下新建zkData目录 修改conf下的zoo-sampl... 02月22日 2,676 views 发表评论 阅读全文
未分类 python装饰器 class Rectangle: def __init__(self, length, width): self.length = length self.width = width def area... 01月28日 2,064 views 发表评论 阅读全文
未分类 python 单例模式 def singleton(cls, *args, **kwargs): instances = {} def _singleton(): if cls not in instances: insta... 01月28日 3,541 views 发表评论 阅读全文
未分类 pandas 其他操作 分组 df.goupby('col') 返回一个迭代,内涵数组(数组) list(data.groupby('code')) # df值 list(data.groupby('code')) # c... 01月27日 3,876 views 发表评论 阅读全文
未分类 pandas Datafram按行过滤 import pandas as pd df = pd.Datafram() iterrows,返回行索引和series iteritems,返回列名,列 itertuples,返回元组,print(... 01月26日 1,281 views 发表评论 阅读全文