发如今家里的时候用Android App里的WebView打开站点非常慢,会有十几秒甚至更长时间的卡住。

可是在电脑上打开相同的网页却非常快。

查找这个问题的过程比較曲折,记录下来。

抓取Android网络数据

为了调试这个问题,首先要抓取Android的网络包数据。開始时,是想用Wireshark来抓包的,可是非常麻烦,tcpdump在手机要root权限。

于是转换思路,能不能在Android上设置代理,来抓包?

可是fiddler没有linux版本号,于是转用BurpSuite了。

设置Android代理方法:

在Android网络设置里,长按连接,选择“改动网络”,“显示高级选项”,“代理”,“手动”,然后填上相应的代理的地址。

hosts和路由器配置的坑

抓取到http请求数据,发现訪问非常快,比在手机上快多了。说明并非网络问题。

再细致观察,发现了这个请求:

GET /gngo.js HTTP/1.1

Host: x.adpro.cn

回忆起来,这个是曾经屏蔽电信在网页上插入的流氓广告时配置了hosts:

127.0.0.1 adpro.cn

127.0.0.1 x.adpro.cn

于是在电脑上把这两个hosts凝视掉之后,发现速度变慢了一点,可是不会像手机上那样卡十几秒。

再尝试在电脑上的浏览器打开http://x.adpro.cn/gngo.js,发现打不开。

ping x.adpro.cn

发现返回的结果是127.0.0.1

为什么在hosts文件中把 x.adpro.cn的条目凝视掉了,返回的结果还是127.0.0.1?

折腾了一阵子,尝试各种清除linux dns的方法,发现x.adpro.cn的解析结果还是127.0.0.1。

再次想起,曾经在路由器上配置过防火墙,果然例如以下有配置了对adpro.cn的拦截:

在路由器里把这个规则失效之后,果然ping x.adpro.cn能返回正确的IP了。

原来是路由器把dns相关的请求也拦截了,导致linux取不到新的dns解析结果,一直用的都是旧的结果,所以总是把x.adpro.cn解析为127.0.0.1。

搞清楚缘由之后,又一次在路由器里拦截adpro.cn的数据包,然后又一次载入网页,发现http://x.adpro.cn/gngo.js的请求会在十几秒之后超时:

这就是在手机上为什么打开网页要十几秒的原因了:

路由器把adpro.cn的数据包拦截了,从而socket全然没有数据返回,所以http请求在十几秒后超时,Android WebView才渲染显示出页面。

为什么电脑上非常快?由于配置了127.0.0.1 x.adpro.cn,所以http请求直接返回失败了,不会堵塞住。

很影响体验的运营商广告

在路由器上把拦截去掉,再在手机上訪问,又出现了一个坑爹的事情:

在WebWiew上会显示电信插入的流氓广告,把大部分区域都挡住了。

怎样过滤掉运营商的流氓广告?黑名单还是白名单

假设只是滤掉的话,用户还以后是站点自己弹的广告。那么怎样在App里过滤掉这些流氓广告?

在WebView里过滤某些url:

当url里含有广告地址时,直接返回一个空的回应。

http://developer.android.com/reference/android/webkit/WebViewClient.html#shouldInterceptRequest(android.webkit.WebView,
java.lang.String)
 http://developer.android.com/reference/android/webkit/WebViewClient.html#shouldInterceptRequest(android.webkit.WebView, java.lang.String)

		webView.setWebViewClient(new WebViewClient() {
public WebResourceResponse shouldInterceptRequest(WebView view, String url) {
if (url.contains("adpro.cn")) {
return new WebResourceResponse(null, null, null);
}
return null;
}

注意的是在api level 11上才干够重载上面的函数。

运营商的广告域名都是相对固定的,能够用黑名单来排除掉。

当然,假设自己的服务都是在自己的域名下的,那么能够考虑採用白名单机制。

白名单机制另一个额外的优点,能够算是一个有一定效果的防止XSS的方法了。

其他的一些东东:

Android上抓包的一些文章:

http://www.trinea.cn/android/android-network-sniffer/     Android利用Fiddler进行网络数据抓包

http://www.freebuf.com/articles/wireless/6517.html    实时抓取移动设备上的通信包(ADVsock2pipe+Wireshark+nc+tcpdump)

屏蔽电信流氓广告造成的诡异的问题--Android WebView 长时间不能载入页面的更多相关文章

  1. JavaScript -- 练习 window 流氓广告

    <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/ ...

  2. 广告域名审核之后跳转技术:点击域名A页面iframe框架下的链接,域名A跳转到域名B

    广告域名审核之后跳转技术:点击域名A页面iframe框架下的链接,域名A跳转到域名B注:域名B为afish.cnblogs.com 域名A页面代码:<!DOCTYPE html PUBLIC & ...

  3. 写个屏蔽百度搜索广告的Chrome插件

    工作生活都用百度比较多,毕竟它是目前为止感觉最好的国内PC搜索引擎.我纵使已经差不多炼成了一眼过滤广告的眼力,但始终觉得碍眼,感觉还是写个插件把它屏蔽了吧.这个插件开发的门槛其实非常低,只是一开始做不 ...

  4. [亲测有效] - Mac下屏蔽优酷广告最简单的方法

    这里不和圣母婊争论该不该屏蔽广告,仅给出可行方法. Windows下的Adsafe,万能的去广告神器!可惜Mac下没有这款软件,Adblock之流在国内基本是个玩具,但是我们可以通过修改HOST文件达 ...

  5. 关于UC、火狐、谷歌浏览器屏蔽布局中广告的解决办法

     关于UC浏览器屏蔽了广西人才网的名企.品牌.热点的logo,是因为当成广告过滤掉了,以后div的class和id不能以“ad”开头.这可能只是其中一个规则,adxxxx是可以的,不能是adXxxx, ...

  6. 屏蔽各类弹窗广告(WPS、智能云输入法)

    托盘中的广告“领取双11红包,最高1111元”的罪魁祸首是“智能云输入法” 广告在托盘中闪动: 结束SCSkinInst.exe后,托盘中的广告消失: 智能云输入法的安装路径可参考: C:\Progr ...

  7. 强大的CSS 属性选择符 配合 stylish 屏蔽新浪微博信息流广告

    新建一条微博域名下的规则: @-moz-document domain("weibo.com") { #v6_pl_rightmod_rank,#v6_pl_rightmod_ad ...

  8. 电信流氓注入JS

    (function () { var cs_url = _pushshowjs_.url, cs_delay = window.cs_delay; var cs_styles = window.sty ...

  9. 屏蔽百度及其广告的部分Host

    127.0.0.44 www.baidu.com127.0.0.44 cpro.baidu.com127.0.0.44 hm.baidu.com127.0.0.44 bdimg.share.baidu ...

随机推荐

  1. [置顶] ARM-Linux下WEB服务器Boa的移植、配置和运行测试

    Linux下使用的轻量级WEB服务器主要有:lighttpd.thttpd.shttpd和boa等等,而Boa是使用最为广泛的轻量级WEB服务器之一(当然,阿帕奇是世界使用排名第一的Web服务器软件) ...

  2. HTTP协议的请求和响应学习

    本篇作为学习servlet的前提,http协议是学习JavaWeb开发的基石,不深入了解http协议,就不能说掌握了JavaWeb开发. HTTP协议有两个版本:HTTP1.0和HTTP1.1,那么有 ...

  3. zabbix 主机名必须要能ping通

    api01:/home/tomcat> cat /etc/hosts 127.0.0.1 localhost ::1 localhost localhost.localdomain localh ...

  4. HTML5 Canvas阴影用法演示

    HTML5 Canvas阴影用法演示 HTML5 Canvas中提供了设置阴影的四个属性值分别为: context.shadowColor = “red” 表示设置阴影颜色为红色 context.sh ...

  5. qt宽字符串中文乱码(codec->toUnicode值得学习)

    乱码原因: QT使用的是utf-8 简体中文版的windows操作系统及其应用软件默认都是ANSI/GBK编码.而且这里应该是宽字符串. 多字节ANISGB 宽字符UNICODE 多字节显示标准字符的 ...

  6. [Android学习笔记]Android向下兼

    Android向下兼容的思路:使用高版本的API,在运行时判断真实运行平台的API版本,根据不同版本做不同的处理 关键类:Build.class里面定义了API版本相关信息 内部类:VERSION定义 ...

  7. Java调用cmd命令 打开一个站点

    使用Java程序打开一个站点 近期做了个东西使用SWT技术在一个client程序 须要升级时在提示升级 点击窗口上的一个连接 打开下载网页 花费了我非常长时间 用到了把它记录下来  怕是忘记,须要时能 ...

  8. 如何设置lmt的空间警告阀值

    Example—设置Locally Managed Tablespace的空间警告阀值 The following example sets the free-space-remaining thre ...

  9. [IDEs]Eclipse For Mac , 常用快捷键

    Cmd + O:  查看.java中得方法,变量,等结构 Cmd + T:     查看继承关系 Cmd + K:          查找下一个选中的成员 Cmd + E:  查看已经打开的文件 Cm ...

  10. C语言之基本算法35—数组上三角之积 主对角之积 副对角之积

    //数组算法 /* ============================================================= 题目:求四阶矩阵上三角之积.主对角之积,副对角之积: 如 ...