遍历CSDN博客

--http://blog.csdn.net/leixiaohua1020/article/list/14?viewmode=contents

function saveData(data)

	local file = io.open("temp.html", "w")

	file:write(data)

	file:close()

end

function getPageCount(url)

	local http = require("socket.http")

	local resp = http.request(url)

	local s = string.find(resp, "<div id=\"papelist\" class=\"pagelist\">")

	local e = string.find(resp, "</div>", s)

	local divData = string.sub(resp, s, e + 5)

	--print(divData)

	local i, j = string.find(divData, "共%d+页")

	local pageCount = string.sub(divData, i + 3, j - 3)

	return pageCount

end

function getTitles(username)

	if(username == nil or username == "") then

		print("username is nil")

		return

	end

	local preUrl = "http://blog.csdn.net/"

	local endUrl = "?viewmode=contents"

	local url = preUrl .. username .. endUrl

	local pageCount = getPageCount(url)

	for i = 1, pageCount do

		local blogUrl = preUrl .. username .. "/article/list/" .. i .. endUrl

		local http = require("socket.http")

		local resp = http.request(blogUrl)

		local pos = 1

		_, pos = string.find(resp, "link_title", pos)

		while(pos ~= nil) do

			local i, j = string.find(resp, "details/%d+\">", pos)

			--print("pageid = " ..  string.sub(resp, i + 8, j - 2))

			local k, _ = string.find(resp, "</a></span>", j)

			print(string.sub(resp, j + 11, k - 23))

			_, pos = string.find(resp, "link_title", pos)

		end

	end

end

getTitles("leixiaohua1020")

如果想保存一篇指定的博文（只要正文），该怎么做呢？

其实只要我们预先保存下博文的js、css和一些控制正文的html标记，然后把正文内容填充进去就可以了。

以下lua脚本可以获得

<div id="article_content" class="article_content">

正文

</div>

start.html

<html>

<head>

    <meta http-equiv="Content-Type" content="text/html; charset=utf-8" />

    <script src="http://static.blog.csdn.net/scripts/jquery.js" type="text/javascript"></script>

    <link rel="Stylesheet" type="text/css" href="http://static.blog.csdn.net/skin/skin-blue/css/style.css?v=1.1" />

    <link rel="shortcut icon" href="http://c.csdnimg.cn/public/favicon.ico" />

    <link type="text/css" rel="stylesheet" href="http://static.blog.csdn.net/scripts/SyntaxHighlighter/styles/default.css" />

</head>

<body>

<div id="container">

<script type="text/javascript">

    var username = "x_iya";

    var _blogger = username;

    var blog_address = "http://blog.csdn.net/x_iya";

    var static_host = "http://static.blog.csdn.net";

    var currentUserName = "";

</script>

<div id="body">

<div id="main">

<div class="main">

<div id="article_details" class="details">

end.html

</div>

</div>

</div>

<script type="text/javascript" src="http://static.blog.csdn.net/scripts/newblog.min.js"></script>

</div>

</body>

</html>

lua代码：

function GetHtml(url)

	local http = require("socket.http")

	local resp = http.request(url)

	local s = string.find(resp, "<div id=\"article_content\" class=\"article_content\">")

	local e = string.find(resp, "<!--", s)

	local data = string.sub(resp, s, e - 1)

	return data

end

function SaveData(data)

	local file = io.open("csdn.html", "w")

	file:write(data)

	file:close()

end

function ReadData(filepath)

	local file = io.open(filepath, "r")

	local data = file:read("*a")

	file:close()

	return data

end

--local url = "http://blog.csdn.net/x_iya/article/details/52327827"

if #arg == 1 then

	local url = arg[1]

	local startData = ReadData("start.html")

	local endData = ReadData("end.html")

	local html = startData .. GetHtml(url) .. endData

	SaveData(html)

else

	print("Usage: lua csdn.lua url")

end

遍历CSDN博客的更多相关文章

【转】Android Building System 总结 - 一醉千年 - CSDN博客
原文网址:http://www.360doc.com/content/15/0314/23/1709014_455175716.shtml Android Building System 总结收藏 ...
Python爬取CSDN博客文章
0 url :http://blog.csdn.net/youyou1543724847/article/details/52818339Redis一点基础的东西目录 1.基础底层数据结构 2.win ...
Android应用开发-小巫CSDN博客clientJsoup篇
Android应用开发-小巫CSDN博客clientJsoup篇距上一篇博客已经过去了两个星期,小巫也认为很抱歉,由于在忙着做另外一个项目,差点儿抽不出空来,这不小巫会把剩下的博文全部在国庆补上.本 ...
PHP採集CSDN博客边栏的阅读排行
项目中要用到採集的数据,所以就先拿CSDN博客来试了试.这里使用Simple HTML DOM(官网)这个库,它可以方便的遍历HTML文档. <?php include_once('simple ...
Spring Boot学习记录(二)--thymeleaf模板 - CSDN博客
==他的博客应该不错,没有细看 Spring Boot学习记录(二)--thymeleaf模板 - CSDN博客 http://blog.csdn.net/u012706811/article/det ...
Python爬虫简单实现CSDN博客文章标题列表
Python爬虫简单实现CSDN博客文章标题列表操作步骤: 分析接口,怎么获取数据? 模拟接口,尝试提取数据封装接口函数,实现函数调用. 1.分析接口打开Chrome浏览器,开启开发者工具(F1 ...
神一样的CSDN博客排名规则
本文转载于:http://blog.csdn.net/littletigerat/article/details/17448521 神一样的CSDN博客排名规则一.引言年. 马年CSDN博客,毫无 ...
梦想还是要有的-纪念正式成为csdn博客专家暨年中总结
csdn博客:http://blog.csdn.net/tuzongxun 我的csdn历程(坚持总会有收获): 一年零三个月之前,2015年3月3日,我在csdn写下第一篇技术博客,只是记录了一 ...
从csdn博客搬家过来，请多关照！
之前一直在csdn博客,也写了不少关于java的文章,主要是学习java上的一些问题.想通过这种方式来加深对问题的认知,同时也可以帮助到志同道合的人,一起在编程的道路上共进,共勉.

随机推荐

JS进阶——this绑定了谁？
一.this的意义二.寻找this绑定对象经常听到这么一句话,找this只需要看谁是调用方.当函数被调用时会记录函数调用调用方式.传参包括this等各种属性.有时候this绑定对象情况太抽象,找到 ...
### Error querying database. Cause: java.lang.IllegalArgumentException: invalid comparison: cn.xiaojian.blog.po.BlogType and java.lang.String ### Cause: java.lang.IllegalArgumentException: ...
### Error querying database. Cause: java.lang.IllegalArgumentException: invalid comparison: cn.xiaoj ...
利用shell脚本实现每隔60秒磁盘内存数据监控脚本
#!/bin/bash #Author:GaoHongYu #QQ: #Time:-- :: #Name:ncjk.sh #Version:V1. clear xtip=$(hostname -I) ...
CentOS 安装图形化界面后重启出现许可等事项操作
这是CentOS内核的初始设置页面,下面给出中文解释及操作方法. 1.CentOS Linux 7 初始设置(核心) 1)[!]许可证信息 (没有接受许可证) 请您选择[‘1’ 输入许可证信息 | ‘ ...
2013 ACM/ICPC Asia Regional Online —— Warmup2 ABEGKL
HDU4716 A. A Computer Graphics Problem A题目描述题意:输出手机剩余电量,保证给出的数是10的倍数. 题解:水题,按题意输出即可. 代码: #include & ...
视频分片上传+C#后端合并
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
来吧，一文彻底搞懂Java中最特殊的存在——null
没事的时候,我并不喜欢逛 P 站,而喜欢逛 programcreek 这些技术型网站,于是那天晚上,在夜深人静的时候,我就发现了一个专注基础但不容忽视的主题.比如说:Java 中的 null 到底是什 ...
MySQL故障演习
MySQL故障演习接上次的 MySQL定时备份该次实验主要是练习在MySQL数据库发生误删等意外情况下,利用全量备份文件和增量备份文件恢复数据. 1. 实验环境 -- 创建数据库 create d ...
python 多进程处理图像，充分利用CPU
默认情况下,Python程序使用一个CPU以单个进程运行.不过如果你是在最近几年配置的电脑,通常都是四核处理器,也就是有8个CPU.这就意味着在你苦苦等待Python脚本完成数据处理工作时,你的电脑其 ...
Spring Boot2 系列教程 (十六) | 整合 WebSocket 实现广播
前言如题,今天介绍的是 SpringBoot 整合 WebSocket 实现广播消息. 什么是 WebSocket ? WebSocket 为浏览器和服务器提供了双工异步通信的功能,即浏览器可以向服 ...

遍历CSDN博客

遍历CSDN博客的更多相关文章

随机推荐

热门专题