前段时间riusksk在公众号分享的Google安全团队的新书,好书,全英原版,开源免费. 免费下载地址:https://static.googleusercontent.com/media/landing.google.com/zh-CN//sre/static/pdf/SRS.pdf riusksk的介绍:https://mp.weixin.qq.com/s/HztqUAeAfuobvXzOfZ6CFA 主要介绍Google SRE团队在安全可靠系统构建过程中的四个主要工作: 设计策略 编码…

在中美当前背景下的安全可靠国产系统(简称安可),安可产业要实现技术自主可控,需要在四个层面逐步实现:基础硬件设施,如芯片.服务器.存储.交换机.路由器:底层软件,包括操作系统.数据库.中间件等:应用软件,面向实际应用的不同领域:安全产品,保障边界安全.终端安全和管理安全产品.目前在安可领域,高端芯片服务器等硬件已能基本满足办公需求:基础软件正在实现国产化替代.而在国产系统下,应用生态便显得匮乏了. 实现应用软件从普通环境到安可操作系统环境的平滑过渡,是丰富国产应用生态.推动安可生态从"可用&qu…

"安可"背景下的中国软件开发 在中美当前背景下的安全可靠国产系统(简称安可),安可产业要实现技术自主可控,需要在四个层面逐步实现:基础硬件设施,如芯片.服务器.存储.交换机.路由器:底层软件,包括操作系统.数据库.中间件等:应用软件,面向实际应用的不同领域:安全产品,保障边界安全.终端安全和管理安全产品.目前在安可领域,高端芯片服务器等硬件已能基本满足办公需求:基础软件正在实现国产化替代.而在国产系统下,应用生态便显得匮乏了. 实现应用软件从普通环境到安可操作系统环境的平滑过渡,是丰富…

原文:Google免费的SVN服务器管理VS2010代码 前言 Google免费为我们提供了代码管理的SVN服务器.首先我这里用的Win7 64的电脑系统,用VS2010进行的代码开发.这里管理代码需要以下准备(现在用的都是最新的版本): 1.(SVN)TortoiseSVN-1.7.12.24070-x64-svn-1.7.9 下载地址链接http://url.cn/FTvkSk当然也可以在官网进行下载 2.VisualSVN-3.0.5下载地址链接http://url.cn/G8CRXN当然…

构建嵌入式小型Linux系统 摘要:用buildroot构建x86的交叉编译工具链:裁减linux内核,尽可能做到最小:手工构建根文件系统:安装qemu虚拟机,仿真新配置的Linux系统:为新配置的Linux系统添加网络支持,在host主机上用bridge-utils构建网桥,通过虚拟网卡tun/tap以NAT的方式使虚拟机能够上网. 一.安装qemu QEMU是一款开源交叉平台仿真器.可以仿真许多硬件体系(x86,x86-64,PowerPC等). 可以到http://wiki.qemu.or…

一.正统的类与继承 类是对象的定义,而对象是类的实例(Instance).类不可直接使用,要想使用就必须在内存上生成该类的副本,这个副本就是对象. 以Java为例: public class Group { } // 创建一个类 Group a = new Group(); // 实例化一个对象 通过继承,子类可以直接从父类获得其所有的属性和方法,继承的实现机制是"复制.拷贝". public class Child extends Parent { } // 创建一个子类,继承父类的…

微软推出的免费新书<Introducing Microsoft SQL Server 2012>,该书详细介绍微软SQL 2012数据库服务最新功能以及功能应用和使用技巧. 该书适合SQL DBA和数据库开发人员参考阅读. PDF下载地址:官方下载 官方内容介绍:http://blogs.msdn.com/b/microsoft_press/archive/2012/03/15/free-ebook-introducing-microsoft-sql-server-2012.aspx 该书共1…

今天突然看到一篇推文,里面讲解了如何薅资本主义羊毛,即如何免费使用Google免费提供的GPU使用权. 可以免费使用的方式就是通过Google Colab,全名Colaboratory.我们可以用它来提高Python技能,也可以用Keras.TensorFlow.PyTorch.OpenCV等等流行的深度学习库来练习开发深度学习的应用. 现在我们介绍如何免费的使用这个非常非常给力的应用!!! 一  项目建立与配置 (1)在Google Drive上创建文件夹:这项功能的使用主要是通过Google…

Google 免费公共 DNS 服务器 http://googleblog.blogspot.com/2009/12/introducing-google-public-dns.html DNS 8.8.8.8 8.8.4.4 http://www.opendns.com/ 短IP的DNS服务器还有以下这些: 4.3.2.1 4.2.2.1 4.2.2.2 4.2.2.3 4.2.2.4 4.2.2.5 4.2.2.6…

bash经典收集 经典收集1 for f in `(cd .; find suite -type f | grep -v SCCS)`; \ do \ d=/usr/local/mysql/mysql-test/`dirname $f`; \ mkdir -p $d ; \ /usr/bin/install -c -m 644 ./$f $d ; \ done test -z "/usr/local/mysql/mysql-test" || mkdir -p -- "/usr…

本文主要参考 http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html 主要内容是对该文章的翻译,部分内容参考其他的网络文章. 1.简介 hadoop分布式文件系统(HDFS)是一个分布式文件系统,运行于普通的硬件之上(例如pc或者廉价刀片服务器).HDFS和现有的分布式文件系统有许多相似之处.然而,不同之处也是很明显的. HDFS是高容错,并用于部署在低成本的硬件之上.HDFS为应用…

php语言只所以在web开发领域占据半壁江山,是因为它有太多的生态,成熟的框架体系,广泛的开源cms系统.建设网站的时候,都想提升开发效率,效率就是成本,如果你用原生php语言开发一个项目,既要设计数据库,又要开发后台管理数据,以要开发前台动态数据.用了开源cms系统,这些都替你把工作做好了,你就设计页面,修改模板就行了,所以都喜欢用开源的cms系统. php常用的开源cms系统有哪些呢?今天给大家介绍三个最常用的,dedecms(织梦系统),帝国cms系统,wordpress这三个,为什么要推…

作者 | 殷铭  颜铺科技架构师 本文整理自架构师成长系列 3 月 19 日直播课程. 关注"阿里巴巴云原生"公众号,回复 "319",即可获取对应直播回放链接及 PPT 下载链接. 导读:颜铺科技因美业⽽⽣,"颜铺专家"是一款专为美业商家打造的 SaaS 平台,为了能够给商户提供更加安全.稳定.高效的平台,我们在技术方面做了很多尝试,经过几次演进,使系统变得更加稳定可靠.今天主要和大家分享一下颜铺科技的架构演进,以及 Nacos 在颜铺的应用实…

2012-09-10        在博文“Linux系统启动过程分析”中我们了解了linux系统的启动流程,今天我们就来手动一步一步从头来构建一个最小的linux系统,然后用模拟器将其加载起来.常见的模拟器有Qemu.Bochs.VMWare.VPC.Virtual Box和Xen等,以及特殊的模拟UML(User-Mode-Linux),这里我们选择用VMWare. 我们制作的Linux系统有shell功能,支持Web Server,telnet等服务,以及ifconfig,vi等常见工具.…

学习源于问题的解决 前段时间在虚拟机上安装了一个oracle软件,虚拟机和宿主机器的网络连接方式是桥接模式的,手动设置了静态ip地址,网关地址,但是发现虚拟机的浏览器不能用. 于是通过ping测试了一下,宿主机的ping www.baidu.com是可以ping通的,但是虚拟机说unknown host,于是让虚拟机ping了一下宿主机ping的baidu对应的ip地址,可以ping通.于是我断定是我的DNS服务器没有设,用startx命令切换到图形界面,真的发现我的DNS那一项是空的,但是设为…

这是在博客园的第一篇文章,由于本人还是一个编程菜鸟,也写不出那些高大上的牛逼文章,这篇文章就是对自己这段时间学习python的一个总结吧. 众所周知python是一门对初学编程的人相当友好的编程语言,就像本屌丝一样,一学就对它产生好感了!当然,想要精通它还有很多东西需要学习.那废话不多说了,下面我就来说一下如何用python3.x与mysql数据库构建一个简单的爬虫系统(其实就是把从网页上爬下来的内容存储到mysql数据库中). 首先就是搭建环境了,这里就简介绍一下我的环境吧.本机的操作系统是w…

宠物识别我们使用到了tensorflow object-detection API  (https://github.com/tensorflow/models/tree/master/research/object_detection) 其中的Quick Start 2向我们介绍了这个项目(https://github.com/tensorflow/models/blob/master/research/object_detection/g3doc/running_pets.md) 安装建议直…

----本节内容------- 1.流式处理系统背景 1.1 技术背景 1.2 Spark技术很火 2.流式处理技术介绍 2.1流式处理技术概念 2.2流式处理应用场景 2.3流式处理系统分类 3.流式处理技术关键技术 3.1流式处理系统管道构建 3.2流式处理系统关键技术 3.3用户行为分析系统介绍 4.问题答疑 5.参考资料 --------------------- 1.流式处理技术 1.1 技术背景 业务驱动技术发展,脱了了业务的技术,最多就是一个研究性的东西,流式处理技术的火爆源于业内…

本文主要翻译自http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-common/SecureMode.html 译注:之所以不翻译为安全模式,是因为namenode启动的时候有个safemode,如果都翻译为安全模式,会有混淆的顾虑. 从重要程度看,本文所阐述的内容,无疑相当高. 但从配置上看,kerberos的配置,可谓hadoop集群搭建中最为繁琐,麻烦的部分. 引入一个kerberos认证,需要额外搭建一个kerb…

在正式环境中,搭建高可靠(ha)的系统是必须的. 例如oralce的rac,apache集群,windows服务器集群 本文不再赘言ha的重要性. 本文主要是对 http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWithQJM.html#Administrative_commands 的翻译,外加一些其它参考和个人的感悟. ---原文相当长 译注:ha-high ava…

本文翻译自:http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HdfsUserGuide.html 基于2.8.0文档 1.目的 本文可以作为以下人员的入门指引:使用hdfs的用户,或者仅仅使用分布式文件系统的用户.虽然hdfs设计的目的是在多个环境中可以用,但关于Hdfs的工作原理还是很有助于配置和诊断特定集群. 2.概述 HDFS是Hadoop应用的主要分布式存储.一个hDFS集群主要包含一个名称节点(管…

中国的网络实在不行,网速一直就是令人诟病. 比韩日那是差太多了,可是相比非洲还是不错.可是这根本无法满足国人的上网需求.于是大家都想破了脑袋想提高网速.这不方法来了么? 笔者在网上找了几种方法关于怎样提高网速的方法,这里就列出了供大家參考參考.大部分为亲身经历哦. 1.老生常谈,清理各种垃圾文件(包含浏览器缓存.注冊表等等)尽可能让电脑干净如飞的执行. 2.Win7改动注冊表的方法,据说能够提速.可是笔者试了试.感觉效果不如想象中的那么完美,或许是我要求太高了吧.这里我就不提供具体的方法了,读者…

前言 ceph的可视化方案很多,本篇介绍的是比较简单的一种方式,并且对包都进行了二次封装,所以能够在极短的时间内构建出一个可视化的监控系统 本系统组件如下: ceph-jewel版本 ceph_exporter的jewel版本 prometheus的2.3.2版本 grafana的grafana-5.2.1版本 Ceph grafana的插件- Clusterby Cristian Calin 适配的系统为centos7 资源如下: http://static.zybuluo.com/zphj1…

摘要:在移动互联网时代,用户数量庞大,标签数量众多,用户标签的数据量巨大.用户画像系统中,对于标签的存储和查询,不同的企业有不同的实现方案.当前主流的实现方案采用ElasticSearch方案.但基于ElasticSearch构建用户画像平台,往往面临灵活性不足.资源开销大.无SQL接口开发不便等问题.为此,本文提供了一种基于华为MRS ClickHouse构建用户画像系统的方法. 本文分享自华为云社区<基于MRS-ClickHouse构建用户画像系统方案介绍>,作者:hourongqi .…

作为数据目录产品,Data Catalog 通过汇总技术和业务元数据,解决大数据生产者组织梳理数据.数据消费者找数和理解数的业务场景,并服务于数据开发和数据治理的产品体系.本文介绍了字节跳动 Data Catalog 系统的构建和迭代过程,将分为上.下篇发布.上篇主要围绕 Data Catalog 调研思路及技术架构展开. 一.背景 1. 元数据与 Data Catalog 元数据,一般指描述数据的数据,对数据及信息资源的描述性信息.在当前大数据的上下文里,通常又可细分为技术元数据和业务元数据.…

一.应用背景 我们今天以民生银行为案例来交大家如何利用报表工具搭建金融租赁考核系统.民生银行在IT建设上已经建设邮件系统.外部网站系统.视频会议系统.OA系统.财务系统.自助报销系统.核心系统.资金管理系统等,鉴于民生租赁公司核心系统已经正式上线运行,相关数据基础已经建立,急需基于这些业务数据建立面向公司各部门及全体员工的绩效考核系统,以形成量化及定性的绩效评价依据,从而建立科学的激励机制,本系统即为实现此需求目标. 民生金融租赁考核系统一期主要包含下列内容: 绩效考核:精确地展示评价周期内员工…

SQL审核与执行,作为DBA日常工作中相当重要的一环,一直以来我们都是通过人工的方式来处理,效率低且质量没办法保证.为了规范操作,提高效率,我们决定引入目前市面上非常流行的SQL自动审核工具Inception. 花了一周看了inception官方文档并搭建了测试环境简单测试,又花了3天写了webui(内部起名叫overmind,以下也简称overmind),目前正在进行各种测试以及手册的编写,还未正式跟我们的流程结合起来投入使用,后续正式使用后再更新使用经验. Inception github:…

参考: https://www.234du.com/1154.html https://mp.weixin.qq.com/s/TGTToLYSQJui94-bQC4HIQ 注册gmail时遇到手机号无法发送短信问题,请切换IE浏览器重试. 0.新建 XXXX.ipynb文件,打开文件 修改->笔记本设置,选择python版本,以及GPU/TPU [说明:以下代码如果执行不成功,请去https://www.234du.com/1154.html中copy] 1.使用Google Colab运行py…

本人翻译自: http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-common/ServiceLevelAuth.html 译注:相对于kerberos等等而言,这个显得简单得多,但作用也不小.在无法知道用户密码或者无法接近主机的前提下,一个程序或者人是无法访问特定服务的. 但在实际应用中,可能主要控制对客户端的访问. 1.目的 描述如何配置和管理服务级别授权 2.要求 要求hadoop已经正确安装,并可用. 3.概览…

此文翻译自http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-hdfs/HdfsPermissionsGuide.html 译注:实际部署中,没有安全控制的hadoop的,最好不要使用,因为可能很多心血会毁于一旦. 概览 HDFS实现了文件和目录的权限模型,这个模式实现了POSIX的许多内容.每个文件或者目录都和一个用户和组关联.对属主,组中其它用户,和其它用户具有分开的权限.文件需要r/w用于读和写.目录使用r/w来列…