今天想把上次参考着网上教程写的scrapy爬虫改写成requests和beautifulsoup的普通爬虫,写着写着发现自己对python的自定义函数还不是太熟悉(自己TCL了.........流泪),赶紧菜鸟教程上复习一下,顺便写篇文章. 0x01:关键字 python中,自定义函数使用def关键字,后面加函数名和参数列表,如下: def 函数名(参数列表): 函数体 如果不需要传参,括号里就不用填,注意,python中不需要定义变量类型.自定义函数除了函数的功能是我们自己编写代码实现的外,其…
在Python里可以自定义函数,实现某特定功能,这里首先要区分一下函数的定义和函数的调用两个基本概念,初学者往往容易混淆. 函数的定义是指将一堆能实现特定功能的语句用一个函数名标识起来,而函数的调用则是通过函数名来使用这一堆语句来执行这堆语句的功能. 在Python定义一个函数很简单,语法如下: def  function_name(arg1,arg2,...) : (tab) statement1 (tab) statement2 (tab) statement3 ....... 在定义函数时…
一.什么是函数? 在数学中,x2+2x2+3=10这样的叫方程. 而ax2+bx2+c=d这样的才叫函数.数学的函数中,abcd等待输入的未知量叫自变量,它需要我们自己去输入,而x这种待求得未知量叫因变量. python中的函数定义是:一段能够重复某种功能的代码段.它能够根据调用者输入的不同变量,运行相同的逻辑,从而得出不同的计算结果.函数的计算过程对于调用者来说是一个黑盒子. 用ax2+bx2+c=d来说明.为了使ax2+bx2+c=d变得能够重复利用,程序员把这个函数的解决方案详细的编写了出…
案例 将一个 pdf 文件按要求分割为几个部分.比如说一个pdf有20页,分成5个pdf文件,每个pdf文件包含4页.设计函数实现? Python代码 from PyPDF2 import PdfFileReader, PdfFileWriter # 分割 pdf 函数定义 def splitPDF(input_pdf, out_num, split_site): for i in range(out_num): with open(input_pdf, 'rb') as open_pdf, \…
函数 1.定义函数 在Python中定义一个函数要使用def语句,一次写出函数名.括号.括号中的的参数和冒号,然后在缩进块中编写函数体,函数的返回值用return返回.如下所示: def 函数名(参数列表): 函数体 简单的定义一个函数 def hello() : print("Hello World!") hello() Hello World! 定义一个带参数的函数: 需求:替换列表中的某个值替换成另一个值l=[3,3,4,5,6,6,5,3,6,2,9,9,2,8,2,3] i=…
什么是函数? 函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段.函数能提高应用的模块性,和代码的重复利用率. 函数的定义方法: def test(x): '函数定义方法' x+=1 return x解释:def:定义函数关键字test:函数名():可定义形参'':文档描述x+=1:代码块或程序处理逻辑return:结束并返回值 函数为什么要有返回值?通过返回值接收函数的执行结果,后续的逻辑需要通过此结果执行其对应操作. 实例:给一个文件写入日志信息 import time # 定…
1.函数的定义 def  func(): 2.函数的调用 func() 3.函数的返回值 #1.没有返回值 # (1)不写return # (2)只写return后面的代码不在继续执行,返回空,代表结束一个函数,跳到整个函数外面 # break 只是跳出函数内的循环内容 # (3)return None 结束 这个不常用 # 2.返回一个值 # (1) 可以返回任何数据类型 # (2)只要返回了,就可以接收了 # (3)如果一个程序有多个return 只返回一个 # 3.返回多个值 # 多个返回…
1 进程 进程:程序的一次(从开始到结束)执行过程,属于一个动态过程.是系统进行资源分配和调度的基本单位. 程序:指的是一个文件,磁盘中可执行的代码.属于一个静态文件 注:进程运行时需要把程序加载如内存,进程有一定的生命周期,进程的创建由操作系统控制,进程占有系统的资源 cpu时间片 : 哪个进程占用cpu,就称之为它在cpu的时间片上 多进程多线程编程是计算机多任务编程的方法,可以使用多核CPU, 每个进程都单独占有4G的地址空间,这里的空间指的是虚拟存储空间,垃圾回收是发生在虚拟内存中. 依…
Python之--自定义函数: 在Python中,定义一个函数要使用def语句,依次写出函数名.括号.括号中的参数和冒号:,然后,在缩进块中编写函数体,函数的返回值用return语句返回. 以下自定义一个函数用于判断一个人是成年人好事青少年: >>> def judge_person(age): ... if age < 18: ... print("teenager!") ... else: ... print("adult!") ...…
编程入门python之定义函数 零基础学编程by学哥 2017-02-06 10:51 今天讲python函数. 输入参数求三角形或圆形或长方形的面积 先输入1个参数:形状类型 1=三角形 2=圆形 3=长方形 然后根据输入的形状类型,要求输入计算面积所需的其它参数: 例如:三角形,输入底和高:圆形,输入半径:长方形,输入长和宽 然后计算出形状面积. 代码如下: 结果如下: 思考一下,这里的计算某种特定形状的面积,这个功能是否能够复用呢,也就是被其它程序使用呢 3个形状的计算面积功能,如果像上面…
本文源码:GitHub·点这里 || GitEE·点这里 一.系统封装函数 MySQL 有很多内置的函数,可以快速解决开发中的一些业务需求,大概包括流程控制函数,数值型函数.字符串型函数.日期时间函数.聚合函数等.以下列出了这些分类中常用的函数. 1.控制流程函数 case...when 根据值判断返回值,类比编程中的IF-ELSE判断. -- DEMO 01 SELECT CASE DATE_FORMAT(NOW(),'%Y-%m-%d') WHEN '2019-12-29' THEN 'to…
作为开发,那么我们前面学的那些知识其实够了,但是不够精简,也不好维护,比如需要打印斐波那契数列: 而当我们需要再次打印斐波那契数列,又要把这段代码加上,是不是很烦,有没有方法可以解决,当然可以,那就是自定义函数,你把斐波那契数列定义为一个函数,然后需要时调用函数就行,这样一劳永逸对不对? 自定义函数 1.作用: 为了代码最大程度的重用和简化代码冗余而提供的基本程序结构,函数是一种设计工具,它能让程序员将复杂的系统分解为可管理的部件,其用于将相关功能打包并参数化 2.创建函数格式:def  you…
函数文档 1.什么是函数文档: 就是放在函数体之前的一段说明,其本身是一段字符串,一个完整的函数需要带有函数文档,这样利于他人阅读,方便理解此函数的作用,能做什么运算 2.怎么查看函数文档: function.__doc__ 注意:不加小括号 3.例: 你可能会想,假如我不传入参数能直接打印函数文档吗? 测试一下就知道: 结果是可以的 接着想,前面说不能带小括号,我确认一下是不是真的不能带小括号呢: 果然是不行的,接着看: 有没有什么发现?总结一下: 函数的.__doc__属性里,因为函数加括号…
前面你看到嵌套两层的函数,也许你有感而发,想来点刺激的对不?那么如果每层内的变量名如果相同会怎样?拿个例子看下就知道: 报错了,报错信息大意是,本地变量‘num’引用前没有被赋值定义.这咋回事,我外层不是定义了吗?这个问题就涉及到今天要说的话题——函数作用域 函数作用域 1.作用域分三个:本地作用域(local),函数内作用域(enclosing),全局作用域(global) 2.三个作用域的优先级规则是这样:L>E>G>B 这里的B是什么呢?是Built-in,眼熟不,好像在哪里用过对…
前面提到了BIF(内置函数)这个概念,什么是内置函数,就是python已经定义好的函数,不需要人为再自己定义,直接拿来就可以用的函数,那么都有哪些BIF呢? 可以在交互式界面(IDLE)输入这段代码,注意是两边都是双下划线 dir(__builtins__) 则可以查看不同python版本都有哪些BIF 就看这些就能很明显的看出python3和python2还是有很多区别的,想看哪个BIF的用法就直接help()它看官方文档就行,这里要说的是,python官方的代码其实很少的语法,基本都是很简单…
前面的章节你如果看懂了,基本算是入门了七八了,不过如果你以为python就这么点东西,你觉得很简单啊,那你就错了,真正的东西在后面,前面我说的几大核心其实也不是多么高深多么厉害的,那些东西是基础很常用,所以你必须掌握好,地基打好才好办事,所以才是核心. 从这一章开始将渐渐进入python中关键的东西 python的一个优势是有着大量自带和在线的模块(module)资源,可以提供丰富的功能,在使用这些模块的时候,如果每次都去网站找在线文档会过于耗费时间,结果也不一定准确.因此这里介绍下python…
编码 这篇博文的主题是,编码问题,老生常谈的问题了对吧?从我这一套的文章来看,前面已经提到好多次编码问题了,的确这个确实很重要,这可是难道了很多能人异士的,当你以为你学懂了,在研究爬虫时你发现你错了,还是没搞懂,爬虫研究完后,你以为你懂了,url编码又把你打回原形,然后你以为你真的懂了,你学到socket的时候,你发现,你还是没有真的理解,真实气人啊,对吧 与编码问题相关的都在这两篇博文中: 洗礼灵魂,修炼python(3)--从一个简单的print代码揭露编码问题,运行原理和语法习惯 洗礼灵魂…
feedparser模块 1.简介 feedparser是一个Python的Feed解析库,可以处理RSS ,CDF,Atom .使用它我们可从任何 RSS 或 Atom 订阅源得到标题.链接和文章的条目了. RSS(Really Simple Syndication,简易信息聚合):是一种描述和同步网站内容的格式你可以认为是一种定制个性化推送信息的服务.RSS 是用于分发 Web 站点上的内容的摘要的一种简单的 XML 格式它能够解决你漫无目的的浏览网页的问题.它的信息越是过剩,它的意义也越加…
声明:本篇文章仅仅以游戏<绝地求生>作为一个参考话题来介绍面向对象编程,只是作为学术引用,其制作的非常简易的程序也不会作为商业用途,与蓝洞公司无关. <绝地求生>最近很火,笼络了全球各地一大批玩家玩这个游戏,实话说,这游戏真不错,有了这个游戏后,当你去网吧时看到的屏幕终于不再清一色的<英雄联盟>界面了,98元就可以买<绝地求生>来玩,这个价格大众都比较能接受.简短介绍一下,游戏一开始,各个玩家都相同境遇,一无所有,赤手空拳,可以前后左右,跑,跳,还有趴下,再…
是的,我是想到什么知识点就说什么,没有固定的主题,我的标题都是在写完博客再给的.本篇博文说说列表进阶话题.其实列表应该是比较熟悉的了,而毫不夸张的说,在实际的开发中,列表也是使用的最多的,以后你会体会到我说的这句话的. 列表解析 1.什么是列表解析: 根据已有列表,高效生成新列表的方式,还有另一个叫法是叫列表推导式 2.作用: 列表解析是python迭代机制的一种应用,它常用于实现创建新的列表,因此要放置在列表中 3.格式: [expr for iter in iterable] 4.实际运用:…
在前面的某一篇中,说完了pickle,但我相信好多朋友都不懂到底有什么用,那么到了爬虫篇,它就大有用处了,而和pickle很相似的就是JSON模块 JSON 1.简介 1)JSON(JavaScript Object Notation) ,js对象标记,是一种轻量级的数据交换格式.它易于阅读和编写,同时也易于机器解析和生成.它基于JavaScript Programming Language, Standard ECMA-262 3rd Edition - December 1999的一个子集,…
模块 其实前面都说过的,不过还是系统的再说一次,相信学到这,大部分都被搞忘了吧,所以再提一下,也为后面的博文做铺垫 1.什么是模块 在程序的开发过程中,随着程序代码越写越多,在一个文件里代码就会越来越长,越来越不容易维护,不断的滚雪球式的增长.为了维护好代码,我们把很多类和函数分组,分别放到不同的python可读的py文件里,这样就解决了问题,让主程序文件的代码减少,很多编程语言都采用这种组织代码的方式,在html标签里也一样,把样式写入css里,要用的使用再链接css样式表就行.而这里的一个.…
decimal 1.作用: 用于浮点数计算.相比内置的二进制浮点数实现 float这个类型有助于 金融应用和其它需要精确十进制表达的场合,控制精度,控制舍入以适应法律或者规定要求,确保十进制数位精度,或者用户希望计算结果与手算相符的场合.Decimal 重现了手工的数学运算,这就确保了二进制浮点数无法精确保有的数据精度. 高精度使 Decimal 可以执行二进制浮点数无法进行的模运算和等值测试 2.函数: 其实decimal模块最常用的函数就是Decimal()和getcontext(),其他基…
前面解析了正则表达式,其实内容还挺多的对吧?确实挺适用的,不仅是python,其他语言或者web前端后端基本都要掌握正则表达式知识,但是你说,这么多,要完全的掌握,灵活运用的话,得搞多久啊?并且如果一次匹配稍有差池,一步错,步步错,并且很多朋友相信其实还不太熟练正则表达式,咋办呢?有没有什么可以替代正则表达式呢?哎,有的,那就是——BeautifulSoup. BeautifulSoup 1.简介 官方文档的解释是: “Beautiful Soup提供一些简单的.python式的函数用来处理导航…
文件I/O操作 1.什么是文件I/O操作 首先I/O(input/output),即输入/输出端口,然后文件,大家应该都是是什么,一个数据,一个txt或者html文档就是一个文件.文件操作就是对文件进行读写删除等的操作.文件I/O操作,个人理解,就是与用户有交互式的文件操作,换句话就是读写操作 文件也是一个可迭代对象 2.有哪些操作: 1):I/O操作:raw_input函数,input函数即可以进行I/O操作,也就是前面说的让代码活起来,这里不再赘述 2):文件操作: 打开关闭文件: 打开文件…
什么是函数,函数说白了就是将一系列代码封装起来,实现代码的重用. 什么是代码重用? 假设我有这样的需求: 但是我还是觉得太麻烦了,每次想吃饭的时候都要重复这样的步骤.此时,我希望有这样的机器:…
案例二: python中定义有/无返回值的函数,演示python没有函数重载这一说 需求:自定义函数:计算两个整数的和值两个原则:1).有没形参有,两个 2).有没返回值可有可无 def my_sum(a,b): sum=a+b return sum 调用自定义函数来实现两个整数求和的操作 sum=my_sum(10,20) print('和值为:%d'%sum) def my_sum(a,b): print('和值为:%d' %(a+b)) my_sum(10,20) 什么是函数重载? 在同一…
本系列教程供个人学习笔记使用,如果您要浏览可能需要其它编程语言基础(如C语言),why?因为我写得烂啊,只有我自己看得懂!! 变量在前面的系列中也许就可以发现,python中的变量和C中的变量有些许不同.比如在C中:例子: #include <stdio.h> int main(void) { /* code */ int a,b,c; int *p,*q,*t; a = ,b=,c=; p = &a; q = &b; t = &c; printf("%d\n…
Python里自定义子函数时,可以在调用时携带一些参数到子函数里去处理.具体用法结构如下: def func(arguments): statement statement etc. 定义子函数一定要注意(a)在)后加上分号:(第一行最后哦),(b)def下边的语句块每行都要用TAB缩进一下!在设计好带参数的子函数之后就可以在Python程序里调用了.先举个例子热热身吧! #define function: print_msg def print_msg(str): print(str) #de…