在sparkR在配置完成的基础上,本例采用Spark on yarn模式,介绍sparkR运行的一个例子. 在spark的安装目录下,/examples/src/main/r,有一个dataframe.R文件.该文件默认是在本地的模式下运行的,不与hdfs交互.可以将脚本进行相应修改,提交到yarn模式下. 在提交之前,要先将${SPARK_HOME}/examples/src/main/resources/people.json 文件上传到hdfs上,我上传到了hdfs://data-mini…

紧接上篇,完成Hadoop的安装并跑起来之后,是该运行相关例子的时候了,而最简单最直接的例子就是HelloWorld式的WordCount例子.   参照博客进行运行:http://xiejianglei163.blog.163.com/blog/static/1247276201443152533684/   首先创建一个文件夹,并创建两个文件,目录随意,为以下文件结构: examples --file1.txt --file2.txt 文件内容随意填写,我是从新闻copy下来的一段英文: 执…

很久之前就想系统的学习和掌握Spring框架,但是拖了很久都没有行动.现在趁着在外出差杂事不多,就花时间来由浅入深的研究下Spring框架.Spring框架这几年来已经发展成为一个巨无霸产品.从最初的只是用来作为依赖注入到现在已经是无法不包.其涉及的领域有依赖注入.MVC.JMS.Web flow.Batch job.Web service.Security-..几乎是涵盖了技术开发的所有方面.本人虽然从事Java语言开发时间不长,但是对Spring中的很多组件都有所涉猎,比如上面列出的那几个都…

摘要:uwsgi执行顺序:启动master进程,执行python脚本的公共代码(import同一层).然后生成worker进程,uwsgi.post_fork_hook=init_functions,初始化生成work子进程.然后请求来临时,每个子进程执行application代码 配置文件ini: [uwsgi] socket=192.168.62.20:8001 http=192.168.62.20:8003 master=true pythonpath=../ module=breapi…

本节使用一个简单的例子引出Python C/C++ API的详细使用方法.针对的是CPython的解释器. 目标:创建一个Python内建模块test,提供一个功能函数distance, 计算空间中两个点之间的距离. 可以在Python代码这样使用test模块: import test s = test.distance((0, 0, 0), (1, 1, 1)) 先上代码: [test.c] #include <Python.h> #include <math.h> static…

fitnesse - 一个简单的例子(slim) 2017-09-30 目录1 编写测试代码(Fixture code)2 编写wiki page并运行  2.1 新建wikiPage  2.2 运行Wiki Page 1 编写测试代码(Fixture code) 返回 Fixture code是被wiki page调用的Java(或其他支持语言)类. Fixture code package util; public class Add { private double A, B; publi…

Struts2的配置和一个简单的例子 笔记仓库:https://github.com/nnngu/LearningNotes 简介 这篇文章主要讲如何在 IntelliJ IDEA 中使用 Struts2,文章使用的 Struts2 的版本是2.5.14.1,与其他的版本有一点差别,在文章里已经说明. 环境 IntelliJ IDEA 2017.2.6 jdk1.8.0_101 Tomcat 8.0.38 添加依赖 依赖的 jar 包有如下几个: commons-fileupload-1.3.3…

跨站脚本功攻击,xss,一个简单的例子让你知道什么是xss攻击 一.总结 一句话总结:比如用户留言功能,用户留言中写的是网页可执行代码,例如js代码,然后这段代码在可看到这段留言的不同一户的显示上就会执行. 1.什么是xss? 用户 代码 页面 XSS攻击全称跨站脚本攻击,是为不和层叠样式表(Cascading Style Sheets, CSS)的缩写混淆,故将跨站脚本攻击缩写为XSS,XSS是一种在web应用中的计算机安全漏洞,它允许恶意web用户将代码植入到提供给其它用户使用的页面中. 2…

转,原文:http://annie09.iteye.com/blog/469997 http://blog.csdn.net/gdsy/article/details/398072 这两篇我也不知道到底那篇是原创. -------------------------------------------------------------------------------------------------- 很基本的东西啦,可问题是从我借来的书上到download的电子书上都是把这部分一带而过…

光说不练假把式,来看一个简单的例子,了解了解OpenCV.这个小demo没有几行代码,作用是显示项目目录下面的一张图片. #include <opencv2\opencv.hpp> #include <iostream> int main() { IplImage *src; src = cvLoadImage("logo.jpg",-1); cvNamedWindow("logo.jpg",0); cvShowImage("log…