昨天朋友做项目遇到一个需求,需要把上千个的微博表情图片下载到本地磁盘,并做好规范命名,塞给我一堆Json数据,让我帮忙处理下,反正闲着也没事干,就帮忙写了。(很简单的一个功能,随手记录下,刚好填补下最近博客的空白)

由于只是方便自己的工具,就不需要什么图形界面了,就用Java去写了,先看下效果图~

 

嘿嘿,突然发现会写程序是件好事,一千多张表情图片要是手动下载再进行改名,非得忙个2天2夜不可。。

好了,言归正传,说下代码实现,分成3步:

1、获取Json数据

2、根据Json数据所提供的图片资源地址进行下载

3、分类,规范命名

先来看下Json数据格式:

为了方便操作,我封装了一个数据实体类

 package com.lcw.downloadutil.domain;

 public class Bean {

     private String phrase;
private String type;
private String url;
private Boolean hot;
private Boolean common;
private String category;
private String icon;
private String value;
private String picid; public String getPhrase() {
return phrase;
} public void setPhrase(String phrase) {
this.phrase = phrase;
} public String getType() {
return type;
} public void setType(String type) {
this.type = type;
} public String getUrl() {
return url;
} public void setUrl(String url) {
this.url = url;
} public Boolean getHot() {
return hot;
} public void setHot(Boolean hot) {
this.hot = hot;
} public Boolean getCommon() {
return common;
} public void setCommon(Boolean common) {
this.common = common;
} public String getCategory() {
return category;
} public void setCategory(String category) {
this.category = category;
} public String getIcon() {
return icon;
} public void setIcon(String icon) {
this.icon = icon;
} public String getValue() {
return value;
} public void setValue(String value) {
this.value = value;
} public String getPicid() {
return picid;
} public void setPicid(String picid) {
this.picid = picid;
} @Override
public String toString() {
return "Bean [phrase=" + phrase + ", type=" + type + ", url=" + url + ", hot=" + hot + ", common=" + common + ", category=" + category + ", icon=" + icon + ", value=" + value + ", picid=" + picid + "]";
} }

然后我写了一个工具类封装了一些方法

分别用来处理(网络数据的获取,Json数据的反序列化,对图片资源的下载)

 package com.lcw.downloadutil.utils;

 import java.io.BufferedInputStream;
import java.io.BufferedOutputStream;
import java.io.BufferedReader;
import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.List; import com.google.gson.Gson;
import com.google.gson.reflect.TypeToken;
import com.lcw.downloadutil.domain.Bean; /**
* 工具类集合
*
* @author Rabbit_Lee
*
*/
public class HelpUtils {
/**
* 根据所提供的url地址获取Json数据
*
* @param path
* @return
*/
public String getHttpString(String path) {
// 存放获取到的数据
String info = "";
// 网络请求所需变量
InputStream in = null;
InputStreamReader reader = null;
BufferedReader bufferedReader = null;
try {
URL url = new URL(path);
// 根据Url打开地址,以utf-8编码的形式返回输入流
in = url.openStream();
reader = new InputStreamReader(in, "utf-8");
bufferedReader = new BufferedReader(reader);
// 临时接受数据变量
String temp = null;
while ((temp = bufferedReader.readLine()) != null) {
info += temp;
}
return info;
} catch (MalformedURLException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
} finally {
try {
in.close();
reader.close();
bufferedReader.close();
} catch (IOException e) {
e.printStackTrace();
}
}
return null;
} /**
* 将所提供的Json数据反序列化成Java对象(List集合)
*
* @param json
* @return
*/
public List<Bean> changeJsonToList(String json) {
// 利用Gson将JSON数据反序列化成JAVA对象
Gson gson = new Gson();
List<Bean> beans = gson.fromJson(json, new TypeToken<List<Bean>>() {
}.getType());
return beans;
} /**
* 下载图片,并按照指定的路径存储
* @param bean
* @param filePath
*/
public void makeImage(Bean bean, String filePath) {
// 网络请求所需变量
try {
//获取输入流
BufferedInputStream in = new BufferedInputStream(new URL(bean.getUrl()).openStream());
//创建文件流
File file = new File(filePath + bean.getPhrase()+".gif");
BufferedOutputStream out = new BufferedOutputStream(new FileOutputStream(file));
//缓冲字节数组
byte[] data = new byte[2048];
int length = in.read(data);
while (length != -1) {
out.write(data, 0, data.length);
length = in.read(data);
}
System.out.println("正在执行下载任务:当前正在下载图片" + bean.getPhrase() + ".gif");
in.close();
out.close();
} catch (MalformedURLException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
}
} }

上面代码对于Json数据的处理,我用到了谷歌给我们提供的Gson工具类

对于Gson类不懂使用的朋友可以看下我之前写过的一篇文章:

Gson简要使用笔记》:http://www.cnblogs.com/lichenwei/p/3987429.html

接着,就是调用主类:

 package com.lcw.downloadutil.main;

 import java.util.List;

 import com.lcw.downloadutil.domain.Bean;
import com.lcw.downloadutil.utils.HelpUtils; public class TaskMain { private static final String URL = "这里涉及到Oauth2.0的一些个人隐私数据就不给出了";
private static String mJsonInfo; public static void main(String[] args) {
HelpUtils helpUtils = new HelpUtils();
// 获取Json数据
mJsonInfo = helpUtils.getHttpString(URL);
// 将Json数据反序列化成java对象
List<Bean> beans = helpUtils.changeJsonToList(mJsonInfo);
//循环遍历下载图片
for (int i = 0; i < beans.size(); i++) {
helpUtils.makeImage(beans.get(i), "C:/images/");
} } }

到这里就完事了,有哪里不清楚的朋友,可以在下面文章评论交流。

作者:Balla_兔子
出处:http://www.cnblogs.com/lichenwei/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文链接。
正在看本人博客的这位童鞋,我看你气度不凡,谈吐间隐隐有王者之气,日后必有一番作为!旁边有“推荐”二字,你就顺手把它点了吧,相得准,我分文不收;相不准,你也好回来找我!

基于Java实现批量下载网络图片的更多相关文章

  1. java+文件批量下载

    这篇文章主要介绍了Java实现批量下载选中文件功能,非常不错,具有参考借鉴价值,需要的朋友可以参考下 1.在action中定义变量 private List<String> downLoa ...

  2. Java实现批量下载《神秘的程序员》漫画

    上周看了西乔的博客“西乔的九卦”.<神秘的程序员们>系列漫画感觉很喜欢,很搞笑.这些漫画经常出现在CSDN“程序员”杂志末页的,以前也看过一些. 后来就想下载下来,但是一张一张的点击右键“ ...

  3. java/resteasy批量下载存储在阿里云OSS上的文件,并打包压缩

    现在需要从oss上面批量下载文件并压缩打包,搜了很多相关博客,均是缺胳膊少腿,要么是和官网说法不一,要么就压缩包工具类不给出 官方API https://help.aliyun.com/documen ...

  4. Java实现批量下载选中文件功能

    1.在action中定义变量 ? 1 2 3 4 5 6 private List<String> downLoadPaths = new ArrayList<String>( ...

  5. java实现批量下载百度图片搜索到的图片

    就是写的个小程序,用于记录一下,方便后续查看,首先感谢下面这个博客,从这篇文章衍生的吧,大家可以学习下: http://www.cnblogs.com/lichenwei/p/4610298.html ...

  6. Node.js 使用爬虫批量下载网络图片到本地

    图片网站往往广告众多,用Node.js写个爬虫下载图片,代码不长,省事不少,比手动一张张保存简直是天与地的区别.以前用Java也做过远程图片下载,但Node.js的下载速度更让人咂舌,这也是非阻塞式变 ...

  7. java多线程批量下载文件

    多线程下载文件 平时开发中有时会用到文件下载,为了提高文件的下载速率,采用多线程下载能够达到事半功倍的效果: package test; /** * 文件下载类 * @author luweichen ...

  8. java+web+批量下载文件

    JavaWeb 文件下载功能 文件下载的实质就是文件拷贝,将文件从服务器端拷贝到浏览器端,所以文件下载需要IO技术将服务器端的文件读取到,然后写到response缓冲区中,然后再下载到个人客户端. 1 ...

  9. Java多线程的下载器(1)

    实现了一个基于Java多线程的下载器,可提供的功能有: 1. 对文件使用多线程下载,并显示每时刻的下载速度. 2. 对多个下载进行管理,包括线程调度,内存管理等. 一:单个文件下载的管理 1. 单文件 ...

随机推荐

  1. C中const 定义常量的使用

    先看如下代码 #include <stdio.h> #include <string.h> #define ARRSIZE(a) (sizeof(a)/sizeof(a[0]) ...

  2. HTML5开发学习:本地存储Web Sql Database

       Web Sql Database,中文翻译作"本地数据库",是随着HTML5规范加入的在浏览器端运行的轻量级数据库.    在HTML5中,大大丰富了客户端本地可以存储的内容 ...

  3. openvpn 的安装和使用方法

    一.安装: 必备条件: 该计算机必须安装了网卡 1.像安装普通软件一样将 openvpn 这个软件安装好 2.到安装目录下/config 中,该目录下默认只有一个 README.txt,然后将企业给的 ...

  4. 静态代理、JDK动态代理和CGLib动态代理之前的区别

    昨天看了一天的代理方面的知识,刚开始看的时候没看出什么花头来,感觉不实用.一大堆的东西,还不如直接new出来,然后调用方法.后来仔细研究了一下AOP(面向切面)的思想,才发现代理的用处实在太大了.现在 ...

  5. MVVM设计模式和在WPF中的实现(四) 事件绑定

    系列目录: MVVM模式解析和在WPF中的实现(一)MVVM模式简介 MVVM模式解析和在WPF中的实现(二)数据绑定 MVVM模式解析和在WPF中的实现(三)命令绑定 MVVM模式解析和在WPF中的 ...

  6. C#导出Excel文件,过长数值显示为科学计数法解决方法 C#

    C#导出EXCEL文件,身份证号码或某些ID内容长度超过15个数字,这样导出的Excel文件中默认情况下将这个值以科学计数方式显示,下面提供两种解决方式:1.在转出的内容前,加上一个TAB符号,C# ...

  7. Java项目收藏

    数据库 MyCat:数据库中间件 IM.消息推送 t-io:不仅仅是百万级即时通讯框架 tio-im:基于t-io写的IM,主要目标降低即时通讯门槛,实现多端不同协议间的消息发送如http.webso ...

  8. SQL Server 导出Excel有换行的解决方法

    参考地址::https://vcoo.cc/blog/1234/ 从 SQL Server 查询结果中复制结果数据粘贴到 Excel 中存在这么个问题:如果字段内容中有换行符,那么粘贴到 Excel ...

  9. Centos7找不到ifconfig和netstat命令

    Centos7发布有一段时间了,最近使用中也发现一些问题,从Centos6换过来后感觉到不少细微的变化 例如默认没有ifconfig和netstat两个命令了,ifconfig其实使用ip addr命 ...

  10. MySql之游标的使用

    一:游标的使用场合 游标只能用于存储过程和函数中. 游标存储了检索语句的结果集,然后在存储过程和函数中可以通过游标来迭代访问结果集中的记录. 二:创建游标 CREATE PROCEDURE 存储过程名 ...