Httpclient爬取优酷网
参考:http://www.cnblogs.com/lchzls/p/6277210.html
/httpClient/src/main/java/com/louis/youku/Page.java
- /**
- * Project Name:httpClient
- * File Name:Page.java
- * Package Name:com.louis.youku
- * Date:2017年11月9日上午9:11:28
- * Copyright (c) 2017, 2692613726@qq.com All Rights Reserved.
- *
- */
- package com.louis.youku;
- /**
- * ClassName:Page
- * Function: TODO ADD FUNCTION.
- * Reason: TODO ADD REASON.
- * Date: 2017年11月9日 上午9:11:28
- * @author michael
- * @version
- * @since JDK 1.7
- * @see
- */
- public class Page {
- //页面内容
- private String content;
- //总播放量
- private String allnumber;
- //每日播放增量
- private String daynumber;
- //评论数
- private String commentnumber;
- //收藏数
- private String collectnumber;
- //赞
- private String supportnumber;
- //踩
- private String againstnumber;
- //电视剧名称
- private String tvname;
- //页面url
- private String url;
- //子集数据
- private String episodenumber;
- public String getContent() {
- return content;
- }
- public void setContent(String content) {
- this.content = content;
- }
- public String getAllnumber() {
- return allnumber;
- }
- public void setAllnumber(String allnumber) {
- this.allnumber = allnumber;
- }
- public String getDaynumber() {
- return daynumber;
- }
- public void setDaynumber(String daynumber) {
- this.daynumber = daynumber;
- }
- public String getCommentnumber() {
- return commentnumber;
- }
- public void setCommentnumber(String commentnumber) {
- this.commentnumber = commentnumber;
- }
- public String getCollectnumber() {
- return collectnumber;
- }
- public void setCollectnumber(String collectnumber) {
- this.collectnumber = collectnumber;
- }
- public String getSupportnumber() {
- return supportnumber;
- }
- public void setSupportnumber(String supportnumber) {
- this.supportnumber = supportnumber;
- }
- public String getAgainstnumber() {
- return againstnumber;
- }
- public void setAgainstnumber(String againstnumber) {
- this.againstnumber = againstnumber;
- }
- public String getTvname() {
- return tvname;
- }
- public void setTvname(String tvname) {
- this.tvname = tvname;
- }
- public String getUrl() {
- return url;
- }
- public void setUrl(String url) {
- this.url = url;
- }
- public String getEpisodenumber() {
- return episodenumber;
- }
- public void setEpisodenumber(String episodenumber) {
- this.episodenumber = episodenumber;
- }
- }
/httpClient/src/main/java/com/louis/youku/DownLoadService.java
- /**
- * Project Name:httpClient
- * File Name:DownLoadService.java
- * Package Name:com.louis.youku
- * Date:2017年11月9日上午9:14:16
- * Copyright (c) 2017, 2692613726@qq.com All Rights Reserved.
- *
- */
- package com.louis.youku;
- /**
- * ClassName:DownLoadService
- * Function: TODO ADD FUNCTION.
- * Reason: TODO ADD REASON.
- * Date: 2017年11月9日 上午9:14:16
- * @author michael
- * @version
- * @since JDK 1.7
- * @see
- */
- public interface DownLoadService {
- public Page downLoad(String url);
- }
/httpClient/src/main/java/com/louis/youku/DownLoadServiceImpl.java
- /**
- * Project Name:httpClient
- * File Name:DownLoadService.java
- * Package Name:com.louis.youku
- * Date:2017年11月9日上午9:14:16
- * Copyright (c) 2017, 2692613726@qq.com All Rights Reserved.
- *
- */
- package com.louis.youku;
- /**
- * ClassName:DownLoadService
- * Function: TODO ADD FUNCTION.
- * Reason: TODO ADD REASON.
- * Date: 2017年11月9日 上午9:14:16
- * @author michael
- * @version
- * @since JDK 1.7
- * @see
- */
- public interface DownLoadService {
- public Page downLoad(String url);
- }
/httpClient/src/main/java/com/louis/youku/PageDownLoadUtil.java
- /**
- * Project Name:httpClient
- * File Name:Page.java
- * Package Name:com.louis.youku
- * Date:2017年11月9日上午9:11:28
- * Copyright (c) 2017, 2692613726@qq.com All Rights Reserved.
- *
- */
- package com.louis.youku;
- /**
- * ClassName:Page
- * Function: TODO ADD FUNCTION.
- * Reason: TODO ADD REASON.
- * Date: 2017年11月9日 上午9:11:28
- * @author michael
- * @version
- * @since JDK 1.7
- * @see
- */
- public class Page {
- //页面内容
- private String content;
- //总播放量
- private String allnumber;
- //每日播放增量
- private String daynumber;
- //评论数
- private String commentnumber;
- //收藏数
- private String collectnumber;
- //赞
- private String supportnumber;
- //踩
- private String againstnumber;
- //电视剧名称
- private String tvname;
- //页面url
- private String url;
- //子集数据
- private String episodenumber;
- public String getContent() {
- return content;
- }
- public void setContent(String content) {
- this.content = content;
- }
- public String getAllnumber() {
- return allnumber;
- }
- public void setAllnumber(String allnumber) {
- this.allnumber = allnumber;
- }
- public String getDaynumber() {
- return daynumber;
- }
- public void setDaynumber(String daynumber) {
- this.daynumber = daynumber;
- }
- public String getCommentnumber() {
- return commentnumber;
- }
- public void setCommentnumber(String commentnumber) {
- this.commentnumber = commentnumber;
- }
- public String getCollectnumber() {
- return collectnumber;
- }
- public void setCollectnumber(String collectnumber) {
- this.collectnumber = collectnumber;
- }
- public String getSupportnumber() {
- return supportnumber;
- }
- public void setSupportnumber(String supportnumber) {
- this.supportnumber = supportnumber;
- }
- public String getAgainstnumber() {
- return againstnumber;
- }
- public void setAgainstnumber(String againstnumber) {
- this.againstnumber = againstnumber;
- }
- public String getTvname() {
- return tvname;
- }
- public void setTvname(String tvname) {
- this.tvname = tvname;
- }
- public String getUrl() {
- return url;
- }
- public void setUrl(String url) {
- this.url = url;
- }
- public String getEpisodenumber() {
- return episodenumber;
- }
- public void setEpisodenumber(String episodenumber) {
- this.episodenumber = episodenumber;
- }
- }
Httpclient爬取优酷网的更多相关文章
- selenium爬取优酷页面并下载图片
from selenium import webdriver import requests driver = webdriver.Chrome() #打开优酷 driver.get("ht ...
- java平台利用jsoup开发包,抓取优酷视频播放地址与图片地址等信息。
/******************************************************************************************** * aut ...
- 爱斯达M2C服装定制系统介绍—在线播放—优酷网,视频高清在线观看
爱斯达M2C服装定制系统介绍-在线播放-优酷网,视频高清在线观看 视频: 爱斯达M2C服装定制系统介绍
- 爬取西刺网的免费IP
在写爬虫时,经常需要切换IP,所以很有必要自已在数据维护库中维护一个IP池,这样,就可以在需用的时候随机切换IP,我的方法是爬取西刺网的免费IP,存入数据库中,然后在scrapy 工程中加入tools ...
- python爬虫基础应用----爬取校花网视频
一.爬虫简单介绍 爬虫是什么? 爬虫是首先使用模拟浏览器访问网站获取数据,然后通过解析过滤获得有价值的信息,最后保存到到自己库中的程序. 爬虫程序包括哪些模块? python中的爬虫程序主要包括,re ...
- selenium爬取煎蛋网
selenium爬取煎蛋网 直接上代码 from selenium import webdriver from selenium.webdriver.support.ui import WebDriv ...
- Scrapy实战篇(一)之爬取链家网成交房源数据(上)
今天,我们就以链家网南京地区为例,来学习爬取链家网的成交房源数据. 这里推荐使用火狐浏览器,并且安装firebug和firepath两款插件,你会发现,这两款插件会给我们后续的数据提取带来很大的方便. ...
- (python爬取小故事网并写入mysql)
前言: 这是一篇来自整理EVERNOTE的笔记所产生的小博客,实现功能主要为用广度优先算法爬取小故事网,爬满100个链接并写入mysql,虽然CS作为双学位已经修习了三年多了,但不仅理论知识一般,动手 ...
- Python Scrapy 爬取煎蛋网妹子图实例(一)
前面介绍了爬虫框架的一个实例,那个比较简单,这里在介绍一个实例 爬取 煎蛋网 妹子图,遗憾的是 上周煎蛋网还有妹子图了,但是这周妹子图变成了 随手拍, 不过没关系,我们爬图的目的是为了加强实战应用,管 ...
随机推荐
- linux查找文件夹下的全部文件里是否含有某个字符串
查找文件夹下的全部文件里是否含有某个字符串 find .|xargs grep -ri "IBM" 查找文件夹下的全部文件里是否含有某个字符串,而且仅仅打印出文件名称 fin ...
- scp windows 和 linux 远程复制 (双向)
一下命令在cmd中 从w -> l : scp D:\a.txt root@192.168.2.113:/home/a 从l -> w: scp root@192.168.2.113:/h ...
- Qt Creator设置黑色主题背景
黑色的主题看起来比較炫酷一点.也有人说黑色主题用起来对眼睛好.只是个人感觉然并卵,依据自己的习惯爱好设置就好. 假设想保护眼睛,还是将屏幕调到合适的亮度,不要太暗.自己眼睛认为舒服最好.也能够通过&q ...
- bvlc_reference_caffenet.caffemodel
#uncoding:utf-8 # set up Python environment: numpy for numerical routines, and matplotlib for plotti ...
- mysql连接超时的问题
使用Hibernate + MySQL数据库开发,链接超时问题: com.mysql.jdbc.CommunicationsException: The last packet successfull ...
- cubietruck制作刷新lubuntu-kernel
一:安装交叉编译工具链以及相应的工具(系统最好是ubutnu-64位-server) sudo apt-get install g++ sudo apt-get install libncurses5 ...
- RabbitMQ安装和介绍
简单的安装方式 yum安装erlang,下载rpm包安装rabbitmq 一.编译安装erlang 1. 官方下载包并解压 wget http://erlang.org/download/otp_sr ...
- IO复用之select实现
前言 在看过前文:初探IO复用后,想必你已对IO复用这个概念有了初步但清晰的认识.接下来,我要在一个具体的并发客户端中实现它( 基于select函数 ),使得一旦服务器中的客户进程被终止的时候,客户端 ...
- js比较3个数字的大小
<script> var a = [1, 5, 2, 123, 34, 43, 7]; var i = j = t = 0; //sort方法, 推荐使用 a.sort(function( ...
- EasyRTMP内置进入摄像机中实现网络推流直播摄像机的功能
本文转自博客:http://blog.csdn.net/jinlong0603/article/details/57468084 在前面的<如何用传统摄像机实现直接对接平台,类似于海康萤石.大华 ...