163data.com.cn data

163data.com.cn是什么?终于搞清楚了... 查看文章 163data.com.cn是什么?终于搞清楚了... 2008-05-31 00:41 一场误会,真TN的无聊的吓人从日志及tcpview上总看到有类如xxx.broad.xw.sh.dynamic.163data.com.cn这样子的地址,一直怀疑是不是被种马了或是被采集了,查了N次搜了N回都还是搞不明. 今天看了一篇文章终于恍然大悟,其实是每个中国电信上网用户的IP反向解析地址,中国电信之所以要把IP地址进行动态…

Spark SQL 之 Data Sources

#Spark SQL 之 Data Sources 转载请注明出处:http://www.cnblogs.com/BYRans/ 数据源(Data Source) Spark SQL的DataFrame接口支持多种数据源的操作.一个DataFrame可以进行RDDs方式的操作,也可以被注册为临时表.把DataFrame注册为临时表之后,就可以对该DataFrame执行SQL查询.Data Sources这部分首先描述了对Spark的数据源执行加载和保存的常用方法,然后对内置数据源进行深入介绍.…

openGPS.cn - 高精度IP定位原理，定位误差说明

[ip定位历史] 关于IP定位,最早是通过运营商实现,每个运营商申请到的ip段,在某个范围内使用. 因此早期只能是国家为单位的基础数据. 对于比较大的国家,就进一步划分,比如,中国某通讯公司(不打广告),固定将某些ip分配某些机房使用,而这些机房则具备地域属性,因此就可以知道某些ip的位置是哪个省市区. 在进一步,网上有种测算路由的方式进行定位,就是由大范围逐个跳转,跟踪路由.从而对比找出ip所在的小范围. [前提条件] 如今,网络铺设已经有个相当多的特性,比如: A.国内的某大运营商,ip资源…

Spring Data R2DBC响应式操作MySQL

1. 前言在使用R2DBC操作MySQL数据库一文中初步介绍了r2dbc-mysql的使用.由于借助DatabaseClient操作MySQL,过于初级和底层,不利于开发.今天就利用Spring Data R2DBC来演示Spring 数据存储抽象(Spring Data Repository)风格的R2DBC数据库操作. 请注意:目前Spring Data R2DBC虽然已经迭代了多个正式版,但是仍然处于初级阶段,还不足以运用到生产中.不过未来可期,值得研究学习. 2. Spring Da…

spark SQL （四）数据源 Data Source----Parquet 文件的读取与加载

spark SQL Parquet 文件的读取与加载是由许多其他数据处理系统支持的柱状格式.Spark SQL支持阅读和编写自动保留原始数据模式的Parquet文件.在编写Parquet文件时,出于兼容性原因,所有列都会自动转换为空. 1, 以编程方式加载数据这里使用上一节的例子中的数据:常规数据加载 private def runBasicParquetExample(spark: SparkSession): Unit = { import spark.implicits.…

Java中时间类中的Data类与Time类

小简博客 - 小简的技术栈,专注Java及其他计算机技术.互联网技术教程 (ideaopen.cn) Data类 Data类中常用方法 boolean after(Date date) 若当调用此方法的Date对象在指定日期之后返回true,否则返回false. boolean before(Date date) 若当调用此方法的Date对象在指定日期之前返回true,否则返回false. Object clone( ) 返回此对象的副本. int compareTo(Date date) 比较…

Linux下运行Jmeter测试所遇问题汇总

一.安装及启动Jmeter 本文原创,专为光荣之路公众号所有,欢迎转发,但转发请务必写出处! 0.下载及安装下载地址及Linux命令 wget http://mirrors.cnnic.cn/apache//jmeter/binaries/apache-jmeter-3.0.tgz 官网下载好tgz的Jmeter压缩包之后,直接解压,解压后的目录结构和windows版本的一致. 1.运行Jmeter报错NonGUIDriver [root@BJ-TEST-11-kvm-221 bin]# …

VMware虚拟机与主机联通及配置上网

vmware版本:10.0.0 build-1295980,安装redhat enterprise linux 5.8 一.物理机与虚拟机联通,但不联网 1.虚拟网络VMnet1设置: 此时,物理主机会自动添加一块虚拟的网卡VMnet1: 2.修改相应的虚拟网卡VMnet1的属性(网关与虚拟机里所安装系统的网关一致,IP设为同一网段) 3.虚拟机设置---->网络连接,修改如下: 4.测试连接: 物理主机windows: ping VMnet1的IP通.ping 192.168.1.2 虚拟机…

docker网络类型访问原理

• bridge –net=bridge 默认网络,Docker启动后创建一个docker0网桥,默认创建的容器也是添加到这个网桥中. • host –net=host 容器不会获得一个独立的network namespace,而是与宿主机共用一个.这就意味着容器不会有自己的网卡信息,而是使用宿主机的.容器除了网络,其他都是隔离的. • none –net=none 获取独立的network namespace,但不为容器进行任何网络配置,需要我们手动配置. • container –net=…

skip-host-cache skip-name-resolve

在mysql 的data 文件夹下生成了一个.err的文件,打开发展,经常有人访问这个,服务器部署在腾讯云上. 2017-05-23 0:49:04 2996 [Warning] IP address '59.110.6.177' could not be resolved: 不知道这样的主机. 2017-05-23 8:48:37 4092 [Warning] IP address '47.92.2.1' could not be resolved: 不知道这样的主机. 2017-05-23…

Python（五）模块

本章内容: 模块介绍 time & datetime random os sys json & picle hashlib XML requests ConfigParser logging shutil subprocess argparse 模块介绍 Python Module(模块),就是一个保存了Python代码的文件.模块能定义函数,类和变量.模块里也能包含可执行的代码. 文件名就是模块名加上后缀.py,在模块内部,模块名存储在全局变量__name__中,是一个string,可以…

python爬虫学习(6) —— 神器 Requests

Requests 是使用 Apache2 Licensed 许可证的 HTTP 库.用 Python 编写,真正的为人类着想. Python 标准库中的 urllib2 模块提供了你所需要的大多数 HTTP 功能,但是它的 API 太渣了.它是为另一个时代.另一个互联网所创建的.它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务. 所以我们来看下Requests库吧! 0. 安装Requests 0.1 Distribute & Pip ¶ 使用 pip 安装Requests非常简单 p…

Android App的设计架构：MVC,MVP,MVVM与架构经验谈

相关:http://www.cnblogs.com/wytiger/p/5996876.html 和MVC框架模式一样,Model模型处理数据代码不变在Android的App开发中,很多人经常会头疼于App的架构如何设计: 我的App需要应用这些设计架构吗? MVC,MVP等架构讲的是什么?区别是什么? 本文就来带你分析一下这几个架构的特性,优缺点,以及App架构设计中应该注意的问题. 1.架构设计的目的通过设计使程序模块化,做到模块内部的高聚合和模块之间的低耦合.这样做的好处是使得程序在开发…

库AFNetworking的使用

库AFNetworking的使用 1.GET请求(html,json,xml) #pragma mark -GET请求 -(void)testGetRequset{ NSString *urlString = @"http://www.baidu.com"; urlString = @"http://m.weather.com.cn/data/101010100.html"; //定义AFNetworking管理 AFHTTPRequestOperationMana…

Spark 官方文档（5）——Spark SQL，DataFrames和Datasets 指南

Spark版本:1.6.2 概览 Spark SQL用于处理结构化数据,与Spark RDD API不同,它提供更多关于数据结构信息和计算任务运行信息的接口,Spark SQL内部使用这些额外的信息完成特殊优化.可以通过SQL.DataFrames API.Datasets API与Spark SQL进行交互,无论使用何种方式,SparkSQL使用统一的执行引擎记性处理.用户可以根据自己喜好,在不同API中选择合适的进行处理.本章中所有用例均可以在spark-shell.pyspark shel…

天气预报API开发

天气预报API开发一. 寻觅篇最近想要跟着视频练习一下利用API开发一个天气预报系统,就在网上找了一下可以用的API,结果好多都已经失效了... 1. 百度车联网天气预报API(失败) 首先是找了视频了的百度开发者平台 – LBS – 车联网 – 天气预报API,结果发现已经在2015年12月停止服务了 2. 中国天气网API(失败) 没办法,既然百度不鸟我了,只能继续找找看有没有别的了.难道就百度一家做生意么? 百度了一下“天气预报API”(^-^),…

RxAndroid+Retrofit+MVVM（1）OKHttp

1)Gradlecompile 'com.squareup.okhttp:okhttp:2.4.0'compile 'com.squareup.okio:okio:1.5.0' 2)Get //创建okHttpClient对象 OkHttpClient mOkHttpClient = new OkHttpClient(); //创建一个Request final Request request = new Request.Builder() .url("http://www.weather.co…

APP接口自动化测试JAVA+TestNG(三)之HTTP接口测试实例

前言前两篇普及相关基础知识后,本篇主要对举例对国家气象局接口自动化测试进行讲解(Get请求及结果断言),以达到自动化测试入门目的,除了前两篇的一些了解外,需要有一定的JAVA知识(HTTP相关). 目录 3.1 HTTP接口(GET)测试实例 3.1.1 待测接口说明 3.1.2 新建JAVA工程 1.工程目录说明 2.Common.java源码 3.getCityWeathe.java源码 4.URLConnection.java源码 3.1.3 编写测试用例 1.测试用例 2.简化…

基于python编写的天气抓取程序

以前一直使用中国天气网的天气预报组件都挺好,可是自从他们升级组件后数据加载变得非常不稳定,因为JS的阻塞常常导致网站打开速度很慢.为了解决这个问题决定现学现用python编写一个抓取程序,每天定时抓取最新的天气情况并生成静态JS供网站调用.由于初学python,程序有些地方写得不是很优雅,还望高手指正. 代码如下: #!/usr/bin/env python#coding:UTF-8 import urllib,os,datetime def GetWeather(cityid): "获取指定…

【代码笔记】iOS-获得徐家汇的天气预报

一,代码. //获得徐家汇的天气预报 -(void)getWeatherInfo{ NSError *error; NSURLRequest *request = [NSURLRequest requestWithURL:[NSURL URLWithString:@"http://m.weather.com.cn/data/101021200.html" ]];//代码为徐家汇 NSData *response = [NSURLConnection sendSynchronousReq…

HttpUrlConnection

•HttpUrlConnection是java的标准类,继承UrlConnection类,二者都是抽象类.其对象主要通过URL的 openConnection方法获得. package com.sumzom.teach.httpurlconnection; import java.io.BufferedReader;import java.io.IOException;import java.io.I…

DB2 JDBC

官方文档: http://www-01.ibm.com/support/knowledgecenter/SSEPGG_10.1.0/com.ibm.db2.luw.apdv.java.doc/src/tpc/imjcc_c0024189.html Jdbc 新旧两种驱动的区别( db2java.zip. db2jcc.jar): http://www.ibm.com/developerworks/cn/data/library/techarticles/dm-0512kokkat/…

【转】根据中国气象局提供的API接口实现天气查询

本文转载自老三的三叶草中国气象局提供了三个天气查询的API接口: [1]http://www.weather.com.cn/data/sk/101190101.html [2]http://www.weather.com.cn/data/cityinfo/101190101.html [3]http://m.weather.com.cn/data/101190101.html 以json格式返回数据,第一和第二个接口返回当天实时的天气数据,第三个返回未来五天天气情况. 其中地址里的加粗显…

【原】python中文文本挖掘资料集合

这些网址是我在学习python中文文本挖掘时觉得比较好的网站,记录一下,后期也会不定期添加: 1.http://www.52nlp.cn/python-%E7%BD%91%E9%A1%B5%E7%88%AC%E8%99%AB-%E6%96%87%E6%9C%AC%E5%A4%84%E7%90%86-%E7%A7%91%E5%AD%A6%E8%AE%A1%E7%AE%97-%E6%9C%BA%E5%99%A8%E5%AD%A6%E4%B9%A0-%E6%95%B0%E6%8D%AE%E6%8C…

android MVC && MVP && MVVM分析和对比

相关:http://www.cnblogs.com/wytiger/p/5305087.html 出处http://blog.csdn.net/self_study,对技术感兴趣的同鞋加群544645972一起交流目录(?)[+] 面试的时候被问到这个问题,用过,也了解过,但是还是不够深入,总结一下. MVC,MVP和MVVM是软件比较常用的三种软件架构,这三种架构的目的都是分离关注,避免将过多的逻辑全部堆积在一个类中,以Android为例,在activity中既有UI的相关处理逻辑…

web框架之 Tornado

初识 Tornado : tornado web server 是使用python编写出来的一个轻量级.高可伸缩性和非阻塞IO的Web服务器软件,其特点是采用epoll非阻塞IO,相应快速,可处理数千并发连接,特别适用于实时的Web服务. 概述: Tornado 是 FriendFeed 使用的可扩展的非阻塞式 web 服务器及其相关工具的开源版本.这个 Web 框架看起来有些像web.py 或者 Google 的 webapp,不过为了能有效利用非阻塞式服务器环境,这个 Web 框架还包含了一…