import sys, urllib2 # req = urllib2.Request(sys.argv[1]) req = urllib2.Request('http://www.sina.com.cn') fd = urllib2.urlopen(req) print "Retrieved", fd.geturl() info = fd.info() for key, value in info.items(): print "%s = %s" % (key,…

原文地址:http://javaz.cn/site/javaz/site_study/info/2015/23312.html 项目地址:http://www.freeteam.cn/ Web页面信息採集 从FreeCMS 2.1開始支持 通过简单配置就可以抓取目标网页信息,支持增量式採集.keyword替换.定时採集,同一採集规则可採集多个页面(静态和动态).可採集多种信息属性.可自己主动审核且静态化信息页面. 採集规则管理 从左側管理菜单点击採集规则进入. 加入採集规则 在採集规则列表下方点…

C# -- WebClient自动获取web页面编码并转换 抽个时间,写篇小文章,最近有个朋友,用vb开发一个工具,遇到WebClient获取的内容出现乱码,可惜对vb不是很熟悉,看了几分钟vb的语法,给他写了个编码转换的拿去用了. 毕竟咱是程序员,必须要有万全之策才可以啊,然后自己思考了一下,用C#码下以下代码,有需要的可以参考一下: /// <summary> /// 获取网页内容 /// </summary> /// <param name="url"…

Python 获取主机IP地址 #!/usr/bin/env python #coding:utf-8 import os ip=os.popen("ifconfig eth0|grep 'inet addr'|awk -F ':' '{print $2}'|awk '{print $1}'") for i in ip: print "ip地址为:%s" %(i.strip()) #ip=ip.read().strip() #print ip Python获取系统的…

获取协议名称:request.getScheme() 获取域名:request.getServerName() 获取项目名称:request.getContextPath() 使用EL表达式获取项目名称:${pageContext.request.contextPath} 获取参数:request.getQueryString() 获取全路径:request.getRequestURL()  …

这个需求本来是来源于公司同事工作中需求,用户需要使用数据分析工具Power BI抓取多页的中国银行官网上当天的外汇数据.但是没能研究出来. 我就开始在网络上找关于使用python来抓取当天汇率的案例分享,没想到“知乎”上有一个网友分享了以下这段代码: # -*- coding:utf-8 -*- import re from lxml import etree import requests url = 'http://www.boc.cn/sourcedb/whpj/index.html' #…

方法一:psutil模块 #!usr/bin/env python # -*- coding: utf-8 -*- import socket import psutil class NodeResource(object): def get_host_info(self): host_name = socket.gethostname() return {'host_name':host_name} def get_cpu_state(self): cpu_count = psutil.cpu…

在一些渗透当中,我们需要批量探针出口来达到我们的目的. 所以就有了这个丑陋简洁的小脚本. #!/usr/bin/env python #-*- coding:utf- -*- import sys import threading import httplib import re import time class Myclass(threading.Thread): def __init__(self,host,path): threading.Thread.__init__(self) se…

import wmi c = wmi.WMI() for sys in c.Win32_OperatingSystem(): #系统信息 print(sys.Caption) #系统版本号 print(sys.BuildNumber) #/64位 print(sys.OSArchitecture) #当前系统进程数 print(sys.NumberOfProcesses) #处理器信息 for pro in c.win32_Processor(): print(pro.DeviceID) pri…

#coding: utf-8 import itchat,datetime from itchat.content import TEXT itchat.auto_login(hotReload=True)#不需要重复扫码登录 class WeChat(object): def get_all_info_from_wechat(self): # itchat.auto_login(enableCmdQR = False) #获取群 roomslist = itchat.get_chatrooms…