python 测试 python def ddd(): pass def ddd(ddd): pass def ddd(): pass def read_xls(head:...
py笔记
py笔记
未分类
spark表缓存
实测可以从1s降低到76ms scala> val df1 = spark.read.json("/testdata/emp.json") //需要上传到hdfs df1: org.apache...
折腾
自定义代码高亮
网页不好看不便于码字，这个主题又对syntaxhighlighter兼容性不好 于是从别的主题复制js代码进文章页进行硬编码 于是找到模板文件名把js文件硬写入single.php 新加了java、b...
折腾
网站访问速度慢debug方法
打开chrome network一看加载30多秒，仔细查某个谷歌统计链接无法访问延时27秒，拖累代码高亮css延迟显示。 查看console无其它异常 搜索网页源代码，定位下载失败谷歌统计链接 在后台...
java
python 云盘半透明加密工具
用云盘和移动硬盘数据安全性都知道的，坚果云之前直接不建议用来同步代码，于是做个自动加解密的工具： （可以将解密地址设计成桌面，实现拖动解密,第一次用而且数据量较大，于是加了个哈希验证，后面可以去掉） ...
未分类
阿里云新机配置
重置密码：阿里云官网后台管理里面直接自助重置 查看centos版本为7.6 cat /etc/redhat-release 查看安装的软件： yum list installed 安装screen ...
python-AI
pandas.datafram高级查询
# pandas文件读写 import pandas as pd # data = pd.read_excel('path') # 其他:csv,json,sql,query,html # data ...
未分类
scala两种环境备忘
IDEA环境： package wordcount import org.apache.spark.{SparkConf, SparkContext} object wordCountScala ex...
大数据
hbase操作指令
启动成功后，可以通过“host:port”的方式来访问HBase管理页面，例如： http://bigdata111:16010 2.2 基本操作 进入HBase客户端命令行 bin/h...
折腾
pycharm启动远程django报找不到settings的错误
无意间解决了，因此无法复现错误，就是run控制台报找不到settings但是终端可以使用python runserver 运行。 看了下manage.py的代码，报错一行是传参那行，于是: 点击右侧按...