最近看到一个 UP 主做的视频,使用可视化动态图,把目前播放量最多的 UP 主一一列出来,结果第一名是哔哩哔哩番剧,第一名的播放量是第二名近 10 倍. B站的番剧数量,也是相对其他平台比较多的,而且质量都还不错.说实话,刚开始用哔哩哔哩的时候,就是为了看番剧.作为一个喜欢看番剧的 pk 哥,我决定用爬虫爬取一下日本动漫电影 TOP100 都有哪些?网上看了一下,时光网正好有这个排行榜,而且信息相对来说比较全. 所以我决定用爬虫把这个榜单上 Top100 的所有电影信息全部保存为 csv 文件放…

8 月 12 日,阿拉丁数据统计平台发布了国内第一份小程序 TOP100 榜单,摩拜单车成为全榜第一! 该榜单数据来源于阿拉丁小程序统计平台检测.合作.如有赞等,并经过企业电话调研和实地走访企业等校准,选取人气.搜索.使用.分享四大指标来衡量一款小程序的活跃度. 目前阿拉丁收录了超过 10000 个小程序,前 5 名小程序分别是摩拜单车.王卡申请助手.腾讯视频.拼多多.蘑菇街女装特卖. 监测数据显示,小程序指数 TOP100 中小程序数量前三位为工具.零售.生活服务,其中工具类占比 36%,后两…

2016中国银行Top100榜单发布 工行排首位 2016-07-09 15:13:19 第一财经   2016年7月8日,中国银行业协会在京召开“<中国银行业发展报告(2016)>发布会.会上首次发布了中国前100家银行排名(以核心一级资本净额排序)榜单. <报告>指出,参考巴塞尔协议和监管机构对商业银行核心资本实力的有关要求,经过广泛比对和深入研究,最终决定以上一年度国内商业银行的核心一级资本净额为排名依据,并附加其总资产.净利润等数据作为补充信息,选取核心一级资本净额排名靠前…

Requests是一个很方便的python网络编程库,用官方的话是"非转基因,可以安全食用".里面封装了很多的方法,避免了urllib/urllib2的繁琐. 这一节使用requests库对猫眼电影的TOP100榜进行抓取. 1 获得页面. 首先确定要爬取的url为http://maoyan.com/board/4,通过requests模块,打印出页面的信息 def get_a_page(url): try: response = requests.get(url) if respon…

import requests import re import json import time def get_one_page(url): headers={'User-Agent':'Mozilla/5.0(Macintosh;Intel Mac OS X 10_11_4) AppleWebKit/537.36(KHTML,like Geck) Chrome/52.0.2743.116 Safari/537.36'} response=requests.get(url,headers=h…

#!/usr/bin/env python # -*- coding: utf- -*- # @Author: Dang Kai # @Date: -- :: # @Last Modified time: -- :: # @E-mail: @qq.com # @Description: # http://maoyan.com/board/4 # http://maoyan.com/board/4?offset=20 import requests import re import json fr…

…

python+requests抓取猫眼中上映电影,re正则匹配获取对应电影的排名,图片地址,片名,主演及上映时间和评分 import requests import re, json def get_html(url): """ 获取网页html源码 :return: """ user_agent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) " \ "AppleWebKi…

本次抓取猫眼电影Top100榜所用到的知识点: 1. python requests库 2. 正则表达式 3. csv模块 4. 多进程 正文 目标站点分析 通过对目标站点的分析, 来确定网页结构, 进一步确定具体的抓取方式. 1. 浏览器打开猫眼电影首页, 点击"榜单", 点击"Top100榜", 即可看到目标页面. 2.  浏览网页, 滚动到下方发现有分页, 切换到第2页, 发现: URL从 http://maoyan.com/board/4变换到http://…

时隔4个月,爱分析的“中国互联网金融企业估值排行榜”更新了! 在这4个月当中,我们调研了数十位企业创始人.专业投资人以及资深行业专家,尤其针对金服集团.消费金融.财富管理.征信等领域进行了深入研究.因而,我们也发现了更多闪光灯之外的优质企业,并将估值排行榜从Top50扩充至Top100. 本次发布的估值排行榜覆盖了金融服务集团.互联网银行.互联网保险.互联网证券.财富管理.借贷.基础设施等众多细分行业.100家入围企业总估值超过1.1万亿,中位数26.3亿,并有27家估值超过60亿的独角兽企业.…