介绍 在该章节中我们将利用提供的课程数据来进行一次实战性质的时间序列和聚类分析. 知识点 数据处理 数据可视化 中文分词 文本聚类 数据概览 本次课程的数据来源于运行过程中产生的真实数据,我们对部分数据进行了脱敏处理. 首先,我们需要下载课程数据集 courses.txt. 网盘链接:https://pan.baidu.com/s/1PTFtUw4wTaVZikK9iWBRtA 提取码:fikr 下载之后,可以通过 head 命令预览数据文件的前 10 行. !head -10 courses.…

一.背景介绍 随着生产力和经济社会的发展,温饱问题基本解决,人们开始追求更高层次的精神文明,开始愿意为知识和内容付费.从2016年开始,内容付费渐渐成为时尚. 罗辑思维创始人罗振宇全力打造"得到APP"就是这样一款优质的可以听音频.学通识课程.看电子书.看直播.记笔记的知识付费平台,得到汇聚罗振宇.薛兆丰.梁宁.万维钢.吴军.香帅.宁向东等各个领域的专家学者的精品课程,致力于服务所有终身学习者. 也许你会感到奇怪,得到就是这样一款只有APP而没有网页版的产品,所以传统的网页爬取对于爬取…

其它课程中的python---6.python读取数据 一.总结 一句话总结: 记常用和特例:慢慢慢慢的就熟了,不用太着急,慢慢来 库的使用都很简单:就是库的常用函数就这几个,后面用的时候学都来得及. 面试的时候看什么:产品.资质.潜力.热情 这几个最重要 python怎么学习:先学大纲,学主干,枝叶等用的时候再去学,这样很快 1.python读取excel的基本库有哪些? xlrd:读.xls以及.xlsx文件 xlwt:写.xls文件 xlrdxlrd是一个从Excel文件读取数据和格式化信…

1. CSDN学院课程数据-写在前面 今天又要抓取一个网站了,选择恐惧症使得我不知道该拿谁下手,找来找去,算了,还是抓取CSDN学院吧,CSDN学院的网站为 https://edu.csdn.net/courses 我看了一下这个网址,课程数量也不是很多,大概有 6000+ 门课程,数据量不大,用单线程其实就能很快的爬取完毕,不过为了秒爬,我还是选用了一个异步数据操作. 2. CSDN学院课程数据-分析页码 还是需要好好的分析一下页码规律 https://edu.csdn.net/courses…

写在前面 今天咱们抓取一下网易云课堂的课程数据,这个网站的数据量并不是很大,我们只需要使用requests就可以快速的抓取到这部分数据了. 你第一步要做的是打开全部课程的地址,找出爬虫规律, 地址如下: https://study.163.com/courses/ 我简单的看了一下,页面数据是基于 https://study.163.com/p/search/studycourse.json 这个地址进行异步加载的.你自己尝试的时候需要借助开发者工具 进行多次尝试,抓取到这个地址的数据为准. 还…

<零起点,python大数据与量化交易>,这应该是国内第一部,关于python量化交易的书籍. 有出版社约稿,写本量化交易与大数据的书籍,因为好几年没写书了,再加上近期"前海智库·zw大数据"项目,刚刚启动. 因为时间紧,只花了半天时间,整理框架和目录. 说是v0.1版,但核心框架已经ok:从项目角度而言,完成度,已经超过70%,剩下的只是体力活. 完成全本书,需要半年以上连续时间,本人没空,大家不要再问:"什么时间可以完成." 配合zwPython,这…

尚学python课程---15.python进阶语法 一.总结 一句话总结: python使用东西要引入库,比如 json 1.python如何创建类? class ClassName: :以冒号结尾 使用 class 语句来创建一个新类,class 之后为类的名称并以冒号结尾: class ClassName: '类的帮助信息' #类文档字符串 class_suite #类体 类的帮助信息可以通过ClassName.__doc__查看. class_suite 由类成员,方法,数据属性组成.…

尚学python课程---12.python语言介绍 一.总结 一句话总结: 1.操作简单:简便计算:允许通过单个“import”语句后跟一个函数调用来完成复杂的计算.虽慢 2.库丰富:比如人工智能和大数据 3.大家都在用:大家又不是傻子,python肯定还有很多好处 1.python是什么类型的语言? Python是一种[面向对象.解释型.动态类型计算机程序设计语言 解释型:程序无需编译成二进制代码,而是在执行时对语句一条一条编译 动态类型:在程序执行过程中,可以改变变量的类型 它常被昵称为胶…

尚学python课程---11.linux环境下安装python注意 一.总结 一句话总结: 准备安装依赖包:zlib.openssl:yum install zlib* openssl*:python的pip需要依赖这两个包 安装ipython:python的好用工具:在python中可以敲 shell命令 1.python3.6.1安装需要注意的是什么? 准备安装依赖包:zlib.openssl:yum install zlib* openssl*:python的pip需要依赖这两个包 2.…

好的python课程体系是怎么样的?Python从1991年走到今天,已经有了28年的历史了,在开发行业来说也是老江湖了,那么python为什么可以在开发行业屹立不倒呢?其实python最吸引程序员的应该就是它的优雅和教学类了,python语言中有很多的语义都是在教学中常见的思想中有特定的对应关系的.因此在学习python的时候要有相对应的课程体系和方法才可以学的好python技术的,那么好的python课程体系是怎么样的呢? python 第一阶段 Python核心编程 可掌握的核心能力 1.…