懒人版（基础）： 下载，解压，粘贴以下代码即可运行成功（example里面的文件） bin/spark-submit \ --class org.apache.spark.examples.Spark...
大数据
大数据
折腾
网站访问速度慢debug方法
打开chrome network一看加载30多秒，仔细查某个谷歌统计链接无法访问延时27秒，拖累代码高亮css延迟显示。 查看console无其它异常 搜索网页源代码，定位下载失败谷歌统计链接 在后台...
py工具
python定时运行闹钟
一个小坑：处理时间判断的时候简单使用大于等于判断容易出现循环多次运行或者错过运行条件。因此引入flage #-*- coding:utf-8 -*- # projectname：编程 #...
未分类
python装饰器
class Rectangle: def __init__(self, length, width): self.length = length self.width = width def area...
未分类
python 单例模式
def singleton(cls, *args, **kwargs): instances = {} def _singleton(): if cls not in instances: insta...
未分类
pandas 其他操作
分组 df.goupby('col') 返回一个迭代,内涵数组(数组) list(data.groupby('code')) # df值 list(data.groupby('code')) # c...
未分类
pandas Datafram按行过滤
import pandas as pd df = pd.Datafram() iterrows,返回行索引和series iteritems，返回列名，列 itertuples，返回元组，print(...
未分类
python操作ssh
多用于实现文件同步 import paramiko transport = paramiko.Transport(("104.243.28.111", 22)) # ...
数据库
redis常用复习
均适用： del key keys * 查看所有key exists key 检查存在 rename key new_key expire key seconds ttl 查看时间 p...
java
pandas连接和按时间排序
total_pd = pd.concat() # 按时间排序： total_pd = pd.to_datetime(total_pd, format='%Y%m%d-%H:%M:%S') total_...