前几天领导让写一个从新闻语料中识别上市公司的方案.上市公司属于组织机构的范畴,组织机构识别属于命名实体识别的范畴.命名实体识别包括人名.地名.组织机构等信息的识别. 要想从新闻语料中识别上市公司就需要把上市公司的信息提取出来,需要有上市公司的信息.趁着周末在家没重要事情,顺手写了个爬虫,爬取了上海交易所的上市公司的信息. 好吧,废话不多说直接上代码.说明:本次代码是一次性的,还有优化的空间.例如:多线程.

1.指定为 post 请求,输入 url Content-Type: application/x-www-form-urlencoded;charset=utf-8 request body中的参数格式:userName=adminicxp&userPassword=123qwe!@# 这种方式可以用 request.getParameter的方式来获得. 2.指定为 post 请求,输入 url Content-Type: application/json; charset=utf-8 req

此篇文章转载自:http://blog.csdn.net/roland_sun/article/details/30078353 工作中经常会需要对一些app进行抓包, 但是每次默认都是只抓http请求的包, 按照这篇文章设置之后就可以抓https的包了, 简单实用, 所以转载过来备用. 现在的Android应用程序几乎都会和网络打交道,所以在分析一个apk的时候,如果可以抓取出其发出的数据包,将对分析程序的流程和逻辑有极大的帮助. 对于HTTP包来说,已经有很多种分析的方法了,例如用tcpdu

备注:本文为博主的同事总结的文章,未经博主允许不得转载. Fiddler下载和配置安装 从网上下载fiddler的安装包即可,直接默认,一直点击下一步,直至安装完成. 安装完成后直接打开Fiddler 在菜单栏Tools->Fiddler Options->Connections,勾选Allow remote computers to connect,默认的端口号为8888,这里不需要修改,在修改手机代理设置时注意与这里一致. 查看pc本机ip后,手机设置代理,填入pc本机的ip和端口号888

好累 以后再写 http://docs.telerik.com/fiddler/knowledgebase/autoresponder

有时候宽频网路用习惯了… 在开发的过程就比较少去考虑最佳化的问题… 但当有人反应说「你的网页好慢」甚至当网路速度慢,会造成你的网页跳出什么啊哩不哒的bug时要如何重现呢? 我们可以用Fiddler 这套强大的web Debugging 工具… Fiddler是一个web调试代理.它能够记录所有客户端和服务器间的http请求,允许你监视,设置断点,甚至修改输入输出数 据,fiddler包含了一个强大的基于事件脚本的子系统,并且能够使用.net框架语言扩展.更多详细的信息我们可以在fiddler的官

使用Fiddler抓取手机请求 Fiddler 手机 今天想尝试在手机上抓包,发现一个好玩的小工具——Fiddler. Fiddler是一个专门的抓包工具,可以模拟请求,修改请求,手机应用调试等.还是蛮有意思的一个小工具. 1.下载安装 Fiddler下载地址:http://www.telerik.com/download/fiddler 安装步骤比较简答, 就不介绍了.一直下一步就可以了. 2.配置PC端Fiddler和手机 (1)配置Fiddler允许监听https 打开Fiddler菜单项

fiddler端设置:(配置好重启fiddler) 1.首先下载安装fiddler,我安装的是fiddler4 2.Tools->Telerik Fiddler Options->HTTPS: 3.Tools->Telerik Fiddler Options->Connections: ios端设置: 1.设置代理服务器和端口: 服务器与电脑(fiddler安装的电脑)端的ip地址一致:端口是fiddler的默认端口:8888 2.安装证书: 打开ios浏览器safari,在搜索框

官网下载Fiddler Fiddler的官方网站:  www.fiddler2.com Fiddler是最强大最好用的Web调试工具之一,它能记录所有客户端和服务器的http和https请求,允许你监视,设置断点,甚至修改输入输出数据,Fiddler包含了一个强大的基于事件脚本的子系统,并且能使用.net语言进行扩展 Fiddler的工作原理 Fiddler 是以代理web服务器的形式工作的,它使用代理地址:127.0.0.1,端口:8888.当Fiddler退出的时候它会自动注销,这样就不会影

场景 fiddler作为调试代理工具,可以捕获电脑与互联网之间所有http通讯. 通过可视化操作或命令行可以按某些规则截获特定请求并修改,但当我们需要批量对请求进行更复杂的逻辑操作时,则不是很方便. 此时就可以考虑使用fiddler script了~ fiddler script 简单讲,fiddler script提供了请求/响应过程中的事件接口,通过这些接口,我们可以编写代码,注册自定义逻辑. 如:OnBeforeRequest.OnBeforeResponse定义了请求发送前及响应前的事件

原文链接:http://caibaojian.com/fiddler.html 这边指的替换HTTP Request Host是,所有原先发到a.com的HTTP Request , Fiddler都帮你转发到b.com ,而在浏览器中毫无感觉. 测试debug过程中常有这种需求,例如用www. dev.demo.com替换 www.demo.com .原文来自:http://caibaojian.com/fiddler.html 替换的方法有两种,一种是暂时的,一种是永久的. 暂时的方法是在F

第一步:下载fiddler,下载地址:http://www.telerik.com/download/fiddler 第二步:安装fiddler,略过... 第三步:启动fiddler,启动后界面如下: 第四步:打开“tools"菜单,界面如下: 第五步:选择"Fiddler Options",再选择HTTPS页签,将下图中所示勾选: 第六步:切换至Connections页签,设置如下,设置完成点击”OK”按钮: 第七步:手机端WIFI设置如下,服务器填写电脑的IP地址,端口

1. [HTTP]Fiddler(一) - Fiddler简介 Fiddler使用代理(127.0.0.1:8888), 打开Fiddler会自动设置该代理. 2.[HTTP]Fiddler(二) - 使用Fiddler做抓包分析 有用的功能: a.保存请求与响应报文,一种方式是:右击某一请求 -> 保存 -> Request或者Response b.查看统计信息:Statistics  查看报文:Inspectors  构造http响应:AutoReponseder  构造http请求:Co

前言: 环境 :手机ios ip5s .fiddler .360wifi 保证手机和电脑是局域网(同一网络) 1:下载安装fiddler 准备环境 2:配置 fiddler 对应把图勾选上 弹出框 点击确定就完成.最后重起fiddler退出. 3:手机wif设置 服务器对应自己的电脑ip :端口 8888对应步骤2 fiddler 设置的端口. 3:打开浏览器safari 输入 192.168.60.2:8888 (自己电脑ip 和fiddler设置端口) 4: 理由fiddler抓包查看 如图

今天使用Fiddler的时候遇到下面这个问题:在地址栏想打开个一般处理程序,出现连接本机失败的提示,如下图: 而这在我没打开Fiddler的时候是显示正常的. 查看Fiddler,在嗅探 -> 第二个Raw的报文最下面提示: [Fiddler] Connection to localhost failed.<BR>Exception Text: 由于目标计算机积极拒绝,无法连接. ::1:53582 53582是我本机的端口号.在左边的web会话窗口显示如下: 502状态码即表示服务器暂

Fiddler官网给出的解决办法(见http://www.fiddler2.com/fiddler/help/hookup.asp#Q-JavaTraffic)是设置jvm参数,如 jre -DproxySet=true -DproxyHost=127.0.0.1 -DproxyPort=8888 MyApp stackoverflow上的牛人们也给出了在Java代码中设置代理服务器的方法(见http://stackoverflow.com/questions/8549749/how-to-ca

1. 下载最新版本的Fiddler Fiddler 官网 2, 安装并启动Fiddler 3, 勾选自动响应 见上图 4, 添加自动响应规则 见上图 5, 添加自动响应内容文件 添加响应文件到Fiddler的响应文件夹, 在安装目录下 . 我当前用是Mac所以地址是:  /Users/<userName>/Fiddler2/Captures/Responses 添加了一个json 文件 内容如下: { "result":false, "msg":&quo

看到一篇讲关于Fiddler抓包工具的讲解,个人感觉写得很仔细,但是作者说禁止转载,那就放个链接Mark一下 http://tmq.qq.com/2016/12/fiddler_packet_capture/

Fiddler调式使用(一)深入研究 阅读目录 Fiddler的基本概念 如何安装Fiddler 了解下Fiddler用户界面 理解不同图标和颜色的含义 web session的常用的快捷键 了解web Session上下文菜单 Fiddler如何捕获firefox中的会话 Fiddler如何捕获Https会话 Fiddler的HTTP统计视图 移动开发如何使用fiddler调式代码 回到顶部 Fiddler的基本概念: Fiddler是一款基于windows系统的代理服务器软件,本地运行的程序

这是开通博客的第一篇随笔,好鸡冻哈哈o_O 首先是下载安装,我安装的是最新的v4.6.2.0版本,大家在百度上搜fidddler4在百度软件中心普通下载就可以了.或者直接用这个连接:http://dlsw.baidu.com/sw-search-sp/soft/47/10963/fiddler4_4.6.2.0_setup.1453708442.exe 下载完双击一步步安装完就OK了. 本想写详细些,写到这就写不下去了,我还是简单点吧, 一.关于fiddler 和其 AutoResponser功

1. 首先需要知道你电脑的ip地址,这个略. 2. 打开手机,wifi那里,选择你的路由器,编辑或者设置,每个手机叫法不一样,点进去 到了里面,每个手机不一样,但是大致上,有一个[使用代理]的这么一个区域,里面估计会有一个类似于[手动代理]的东西,选择,然后 有一个输入ip地址的地方,输入你[电脑的ip地址]就好了: 然后还有一个输入端口的地方,这里你随便输入吧,不过有些端口不行,所以,为了通用,你就写[8888],这个肯定行. 然后就确定什么的,之类的按钮吧.就好了. 3. 回到电脑,打开Fi