我们在之前的文章谈到了高效爬虫 在 python 中 多线程下的 GIL 锁会让多线程显得有点鸡肋 特别是在 CPU 密集型的代码下 多线程被 GIL 锁搞得效率不高 特别是对于多核的 CPU 来说 如果想要充分利用 CPU 还是用多进程吧 这样我们就可以做到并行爬取 提高了爬取的效率 那么,怎么玩多进程呢 恩 接下来就是 学习 python 的正确姿势 可以使用 multiprocessing 来实现多进程 使用起来也是很简单的 比如我们使用 Process 这个类来创建进程 from mul
写在前面的一些P话: 大家都知道,效率不管是对于工作还是学习都是十分重要的.当然,Python也是需要效率的.众所周知,Python 不是一种执行效率较高的语言.此外在任何语言中,循环都是一种非常消耗时间的操作.假如任意一种简单的单步操作耗费的时间为 1 个单位,将此操作重复执行上万次,最终耗费的时间也将增长上万倍. while 和 for 是 Python 中常用的两种实现循环的关键字,它们的运行效率实际上是有差距的.比如下面的测试代码: Python学习交流Q群:660193417### i