一.配置环境 在浏览器中安装web scraper插件. 所有安装包下载链接: https://pan.baidu.com/s/1CfAWf0wMO6WqicoUgdYgkg 提取码: nn2e 安装教程:http://www.iwebscraper.com/webscraper-install/ 安装成功后打开任意网站,按F12 二.插件简单介绍 步骤 1.选择器选项 2.sitemap选项 三.爬取58同城——多页爬取 说明:爬取后有多余的换行和空格,在excel中使用trim和clean函…

不懂编程也能做AR程序 可能一听到要做AR程序,很多人都会想到这是程序员的事.如果不懂编程,不会写代码,是做不了AR程序的.其实,Vuforia的Unity SDK非常人性化,即使你不会编程,也能做出简单的AR程序.只要按着这篇教程一步一步来,你就能做出一个简单的识图AR App. 在开始做AR App之前,你需要准备好制作工具,磨刀不误砍柴工嘛.由于本篇教程是生成在iOS平台,所以选择的操作系统是Mac OS,然后需要下载Unity和Xcode.如果你是想做Android程序,在Windows…

Revealjs网页版PPT让你复制粘贴另类装逼,简洁优雅又低调,不懂编程也看过来 要了解一个新知识我们可以从三个方面入手:是什么,有什么用,怎么用.下面我们就从这三个方面进行讲解Reveal.js噢 Reveal.js是什么 它是一个专门用来做 HTML 演示文稿的框架,通俗的讲它是网页版的ppt,使用浏览器进行播放. Reveal.js有什么用 使用它可以用网页做出酷炫的展示内容,不会编程看完后也可以做出炫酷效果哦... 优势如下: 1.它提供了一套ppt的效果展示,我们只需要关注内容的编写…

我虽然不懂java也不懂程序员,但我理解这种心情.当看到自己还算自信的专业领域中一部超越自己水平很多的作品或比自己优秀太多的人,难免会感到震惊,继而进行自我否定.就像我曾经非常喜欢写作,在杂志和校报上发表了几篇后更是得意,可是加入文学社之后,被一个低年级女生斐然的文采和独特的角度彻底震惊了,同样的题目她能从我们完全想不到的角度去写,还拿过某作文大赛全国冠军,年少的我非常自卑,后面去的越来越少乃至退社.现在我只觉得非常后悔,因为我后面在生活中遇到了更多文字牛逼的人物,我觉得自己放弃的太早了,失去了…

简评: 之前微软曾推出过「Kodu Game Lab」,它可以让完全没有编程经验的人通过简单的步骤打造属于自己的游戏.无独有偶,Google 最近在 Steam 也推出了类似的程序「Game Builder」,可以让使用者体会到「开发游戏跟玩游戏一样简单」的体验. 「Game Builder」是来自内部孵化器 Area 120 的实验项目.如果你想制作一个第一人称多人游戏,却没有任何开发经验,也不会建立 3D 模组,这个程序就能帮到你了! 用户不必动手写一行代码,仅仅通过其内的视觉化程序编写系统…

一.爬虫基础 1.爬虫概念 网络爬虫(又称为网页蜘蛛),是一种按照一定的规则,自动地抓取万维网信息的程序或脚本.用爬虫最大的好出是批量且自动化得获取和处理信息.对于宏观或微观的情况都可以多一个侧面去了解: 2.urllib库 urllib是python内置的HTTP请求库,旗下有4个常用的模块库: urllib.request 请求模块 urllib.error 异常处理模块 urllib.parse url解析模块 urllib.robotparser robots.txt解析模块 3.url…

#!/usr/bin/env python import cStringIO # import formatter # from htmllib import HTMLParser # We use various classes in these modules for parsing HTML. import httplib # We only need an exception from this module import os # This provides various file…

需求描述: 1,打开网站: 2,获取网站的文件内容: 3,返回保存到文件中: 这里的就用到了多线程的方法 import requests,threading,time def write_html(url,name): r = requests.get(url) with open(name,'w',encoding='utf-8') as fw: fw.write(r.text) urls=['www.nnzhp.cn','besttest.cn','www.imdsx.cn','sb.nnz…

背景:原先的b/s设计中在一个jsp界面中实现多个复杂的工作流... 为实现移动接口的调用保证工作流的正常webproject特别给提供了该虚拟浏览器的方案 原理:通过该方案实现虚拟浏览器后台运行jsp脚本,以达到我们要求 要求: 1.session保持.不然总会跳转到login界面 2.jsp脚本必须被运行,不能仅仅是单纯的发起一个请求 先上 private String submitHandler(HttpServletRequest request,String msg,String se…

在作者学习的众多编程技能中,爬虫技能无疑是最让作者着迷的.与自己闭关造轮子不同,爬虫的感觉是与别人博弈,一个在不停的构建 反爬虫 规则,一个在不停的破译规则. 如何入门爬虫?零基础如何学爬虫技术?那前提肯定会是需要学习一门 简单易入门 的编程语言了,就作者而言, python 无疑是最合适的!到2014年7月为止,在美国顶尖大学里最受欢迎的计算机编程入门语言中,Python 是最受欢迎的语言.总的来说,在计算机排名前 10 的学校里,有 80% (也就是8 所学校)的学校使用 Python 作为…