[开发技巧]·Python极简实现滑动平均滤波(基于Numpy.convolve) ​ 1.滑动平均概念 滑动平均滤波法(又称递推平均滤波法),时把连续取N个采样值看成一个队列 ,队列的长度固定为N ,每次采样到一个新数据放入队尾,并扔掉原来队首的一次数据.(先进先出原则)  把队列中的N个数据进行算术平均运算,就可获得新的滤波结果.N值的选取:流量,N=12:压力:N=4:液面,N=4~12:温度,N=1~4 优点:  对周期性干扰有良好的抑制作用,平滑度高  适用于高频振荡的系统 缺点:  …
1.使用python生成数据库文件内容 # coding=utf-8import randomimport time def create_user():    start = time.time()    count = 1000  # 一千万条数据    beginId = 200010000    with open(r"./userInfo.txt", "w") as fp:        for i in range(1,count+1):        …
小数据存储 我们在编写代码的时候,经常会涉及到数据存储的情况,如果是爬虫得到的大数据,我们会选择使用数据库,或者excel存储.但如果只是一些小数据,或者说关联性较强且存在存储后复用的数据,我们该如何存储呢? open保存文本 最简单.粗暴+无脑的存储方式就是保存成一个文本文档了. 使用open函数,将结果一行行的保存成文本,这里涉及的知识点只有简单的几条: 文件读写模式,r .w.a.b.+ ,掌握这几种即可. 使用单独的open打开文件时,需要注意结尾时的调用close()函数关闭文档 推荐…
目录 一.可变与不可变类型 二.数字类型 三.字符串类型 四.列表类型 一.可变与不可变类型 可变类型:值改变,但是id不变,证明就是在改变原值,是可变类型 不可变类型:值改变,id也跟着改变,证明产生了新的值,是不可变类型 # 整型是不可变类型 x = 9 print(id(x)) x = 10 print(id(x)) # 列表是可变类型 l = ['a','b'] print(id(l)) l[0] = 'A' print(l) print(id(l)) 二.数字类型 # 一.整型int…
本文是Python大数据与机器学习系列文章中的第6篇,将介绍学习Python大数据与机器学习所必须的NumPy库. 通过本文系列文章您将能够学到的知识如下: 应用Python进行大数据与机器学习 应用Spark进行大数据分析 实现机器学习算法 学习使用NumPy库处理数值数据 学习使用Pandas库进行数据分析 学习使用Matplotlib库进行Python绘图 学习使用Seaborn库进行统计绘图 使用Plotly库进行动态可视化 使用SciKit-learn处理机器学习任务 K-Means聚…
JavaScript 解析 Django/Python 生成的 datetime 数据 当Web后台使用Django时,后台生成的时间数据类型就是Python类型的. 项目需要将几个时间存储到数据库中是很常见的情况.那么当需要网页显示这个时间的时候,可能会出现问题. 例如,后台获取当前时间 datetime.now([tz]) 带有时区的,存入数据库内.存进去的数据是这样的 1999-12-30 16:00:00 当业务需要时,再次从数据库中获取到这个数据,并显示在前台. 我遇到的情况是,如果直…
在科学计算的过程中,往往需要保存一些数据,也经常需要把保存的这些数据加载到程序中,在 Matlab 中我们可以用 save 和 lood 函数很方便的实现.类似的在 Python 中,我们可以用 numpy.save() 和 numpy.load() 函数达到类似的效果,并且还可以用 scipy.io.savemat() 将数据保存为 .mat 格式,用scipy.io.loadmat() 读取 .mat 格式的数据,达到可以和 Matlab 或者Octave 进行数据互动的效果. 下面分别介绍…
文章链接:https://mp.weixin.qq.com/s/NmJjTEADV6zKdT--2DXq9Q 回看18年,最有成就的就是有了自己的 博客网站,坚持记录,写文章,累计写了36篇了,从一开始的难以下手,到现在成为一种习惯,虽然每次写都会一字一句斟酌,但是每次看到产出,内心还是开心的,享受这样的过程. 这篇文章就是用python 生成自己写的博客词云,平常写的博客都是markdown 格式的,直接把文件传到后台,前端用js去解析文件显示的,所以我这里处理数据就不需要去爬虫网站,直接读文…
python爬虫+数据可视化项目(一) 爬取目标:中国天气网(起始url:http://www.weather.com.cn/textFC/hb.shtml#) 爬取内容:全国实时温度最低的十个城市气温排行榜 使用工具:requests库实现发送请求.获取响应. beautifulsoup实现数据解析.提取和清洗 pyechart模块实现数据可视化 爬取结果:柱状图可视化展示: 直接放代码(详细说明在注释里,欢迎同行相互交流.学习~): import requests from bs4 impo…
python调用数据返回字典dict数据的现象2 思考: 话题1连接:https://www.cnblogs.com/zwgbk/p/10248479.html在打印和添加时候加上内存地址id(),可以查看结果.可以得出结论:1.在make()函数里,生成数据的两种不同赋值方式. 1.1第一种情况,是在一个内存地址生成了一个空的字典.随后每次调用数据时候改变这个内存地址的里的数据. 1.2第二种情况,是在每次调用数据的时候,都生成不同内存地址的字典.2.添加进list后,并不是把数据直接保存在l…