Pandas系列之入门篇 简介 pandas 是 python用来数据清洗.分析的包,可以使用类sql的语法方便的进行数据关联.查询,属于内存计算范畴, 效率远远高于硬盘计算的数据库存储.另外pandas还提供了大数据存储的API--HDFStore,来对接HDF5. 安装 pandas 利用豆瓣源,速度快 pip install pandas numpy -i http://pypi.douban.com/simple --trusted-host pypi.douban.com pytabl…

Pandas系列之入门篇--HDF5 简介 HDF5(层次性数据格式)作用于大数据存储,其高效的压缩方式节约了不少硬盘空间,同时也给查询效率带来了一定的影响, 压缩效率越高,查询效率越低.pandas 0.20.1之后的版本默认选用blosc压缩,跟bzip2相比,其间做了一个小测试,10000 条数据,bzip2的压缩率是blosc的30倍,而查询效率blosc却是bzip2的8倍.至于项目中选用哪种压缩方式,需要看具体需求. 回顾上一节<Pandas系列之入门篇> 上一节提到用hdf5作为…

Python系列之入门篇--HDFS 简介 HDFS (Hadoop Distributed File System) Hadoop分布式文件系统,具有高容错性,适合部署在廉价的机器上.Python 提供了两种接口方式,分别是hdfscli(Restful Api Call),pyhdfs(RPC Call),这一节主要讲hdfscli的使用 代码示例 安装 pip install hdfs 引入相关模块 from hdfs import * 创建客户端 """ It has…

Python系列之入门篇--MYSQL 简介 python提供了两种mysql api, 一是MySQL-python(不支持python3),二是PyMYSQL(支持python2和python3) 代码示例 安装 pip install MySQL-python 引入相关模块 import MySQLdb 创建客户端 conn = MySQLdb.connect(host, user, passwd, database, charset='utf8') cur = conn.cursor()…

C# 串口操作系列(1) -- 入门篇,一个标准的,简陋的串口例子. 标签: c#objectnewlineexceptionbytestring 2010-05-17 01:10 117109人阅读 评论(302) 收藏 举报  分类: 通讯类库设计(4)  版权声明:本文为博主原创文章,未经博主允许不得转载. 我假设读者已经了解了c#的语法,本文是针对刚打算解除串口编程的朋友阅读的,作为串口编程的入门范例,也是我这个系列的基础. 我们的开发环境假定为vs2005(虽然我在用vs2010,但避…

第一篇文章我相信很多人不看都能做的出来,但是,用过微软SerialPort类的人,都遇到过这个尴尬,关闭串口的时候会让软件死锁.天哪,我可不是武断,算了.不要太绝对了.99.9%的人吧,都遇到过这个问题.我想只有一半的人真的解决了.另外一半的人就睁只眼闭只眼阿弥佗佛希望不要在客户那里出现这问题了. 你看到我的文章,就放心吧,这问题有救了.我们先回顾一下上一篇中的代码 void comm_DataReceived(object sender, SerialDataReceivedEventArgs…

Python2.7.13 安装 说明 以下所有操作都基于centos6.9 1. Issue zlib zlib-devel是安装setuptools依赖的模块,需要在安装python之前先安装这两个模块 2. Install Base #基础依赖 yum -y install gcc gcc-c++ zlib zlib-devel openssl-devel #删除当前mysql版本 yum remove MySQL-server-5.6.21-1.el6.x86_64 MySQL-clien…

Dcoker是什么? 概述 Docker 是世界领先的软件容器平台.开发人员利用 Docker 可以消除协作编码时“在我的机器上可正常工作”的问题.运维人员利用 Docker 可以在隔离容器中并行运行和管理应用,获得更好的计算密度.企业利用 Docker 可以构建敏捷的软件交付管道,以更快的速度.更高的安全性和可靠的信誉为 Linux 和 Windows Server 应用发布新功能. 认识容器 有了容器,就可以将软件运行所需的所有资源打包到一个隔离的容器中.容器与虚拟机不同,不需要捆绑一整套操…

pytables及其客户端查看 pytables # ubuntu sudo apt-get install python-tables pip install flask flask-httpauth # centos pip install tables hdf5 Download: https://www.hdfgroup.org/downloads/hdf5/source-code/ ./configure make make check make install 客户端 1. 命令行工…

问:项目中为何要选用Redis? 答:传统的关系型数据库(如MySQL)已经不适用所有的场景了,比如美云销抢单活动的库存扣减,APP首页的访问流量高峰等等,都容易把数据库打崩,所以引入了缓存中间件,目前市场上比较常用的缓存中间件有Redis 和 Memcached ,不过综合考虑了他们的优缺点,最后选择了Redis . 问:Redis 和 Memcached 有啥区别,你们为何选择Redis作为缓存中间件? 答: Redis的好处: 速度快,因为数据存在内存中,类似于HashMap,HashMa…