Spark目录
1. Spark1.0.0 应用程序部署工具spark-submit
2. Spark Streaming的编程模型
3. 使用java api操作HDFS文件
4. 用SBT编译Spark的WordCount程序
5. 在Spark上运行TopK程序
6. 在Spark上运行WordCount程序
7. Spark一个简单案例
8. Spark源码分析
9. Spark SQL
10. HDFS常用命令
11. Spark SQL之调优
12. Spark调优
13. Spark学习视频整合
14. HDFS命令行工具
15. MapReduce调度器
16. 在Spark程序中使用压缩
17. Spark集群基于Zookeeper的HA搭建部署笔记(转)
18. 使用 Kafka 和 Spark Streaming 构建实时数据处理系统(转)
19. spark streaming 接收 kafka 数据java代码WordCount示例
20. Spark+Kafka的Direct方式将偏移量发送到Zookeeper实现(转)
21. 使用Spark读写CSV格式文件(转)
22. 在Spark中尽量少使用GroupByKey函数(转)
23. Spark应用程序运行的日志存在哪里(转)
24. Spark Streaming性能调优详解(转)
25. 在Spark中自定义Kryo序列化输入输出API(转)
26. Spark Streaming中空batches处理的两种方法(转)
27. 【采集层】Kafka 与 Flume 如何选择(转)
28. Spark RDD API扩展开发
29. Storm和Spark Streaming框架对比(转)
30. Spark源码分析:多种部署方式之间的区别与联系(转)
31. Spark入门实战系列--6.SparkSQL(上)--SparkSQL简介
32. sparkSQL1.1入门之一:为什么sparkSQL
33. Spark Streaming:大规模流式数据处理的新贵(转)
34. HBase系统架构及数据结构(转)
35. 错误Name node is in safe mode的解决方法 (转)
36. flume学习(三):flume将log4j日志数据写入到hdfs(转)
37. Spark中加载本地(或者hdfs)文件以及SparkContext实例的textFile使用
38. Spark从HDFS上读取JSON数据
39. Spark向HDFS中存储数据
40. Spark GraphX图处理编程实例
41. GraphX中Pregel单源点最短路径(转)
Spark亚太研究院系列丛书——Spark实战高手之路 从零开始_读书频道_51CTO.COM_领先的中文IT技术网站
http://book.51cto.com/art/201408/448416.htm
Spark目录的更多相关文章
- Spark运行模式与Standalone模式部署
上节中简单的介绍了Spark的一些概念还有Spark生态圈的一些情况,这里主要是介绍Spark运行模式与Spark Standalone模式的部署: Spark运行模式 在Spark中存在着多种运行模 ...
- Spark on YARN的部署
Spark on YARN的原理就是依靠yarn来调度Spark,比默认的Spark运行模式性能要好的多,前提是首先部署好hadoop HDFS并且运行在yarn上,然后就可以开始部署spark on ...
- Spark快速入门 - Spark 1.6.0
Spark快速入门 - Spark 1.6.0 转载请注明出处:http://www.cnblogs.com/BYRans/ 快速入门(Quick Start) 本文简单介绍了Spark的使用方式.首 ...
- 在 Azure HDInsight 中安装和使用 Spark
Spark本身用Scala语言编写,运行于Java虚拟机(JVM).只要在安装了Java 6以上版本的便携式计算机或者集群上都可以运行spark.如果您想使用Python API需要安装Python解 ...
- Mac 配置Spark环境scala+python版本(Spark1.6.0)
1. 从官网下载Spark安装包,解压到自己的安装目录下(默认已经安装好JDK,JDK安装可自行查找): spark官网:http://spark.apache.org/downloads.html ...
- 使用sbt构建spark 程序
今日在学习scala和spark相关的知识.之前在eclipse下编写了wordcount程序.但是关于导出jar包这块还是很困惑.于是学习sbt构建scala. 关于sbt的介绍网上有很多的资料,这 ...
- Windows下Spark单机环境配置
1. 环境配置 a) java环境配置: JDK版本为1.7,64位: 环境变量配置如下: JAVA_HOME为JDK安装路径,例如D:\software\workSoftware\JAVA 在pa ...
- spark on centos6.5 安装
第一步在centos 6.5上安装java 运行环境 http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-18 ...
- Spark:利用Eclipse构建Spark集成开发环境
前一篇文章“Apache Spark学习:将Spark部署到Hadoop 2.2.0上”介绍了如何使用Maven编译生成可直接运行在Hadoop 2.2.0上的Spark jar包,而本文则在此基础上 ...
随机推荐
- iOS学习中的一些误区
周二拿到offer之后,周三确定了去哪家,今天周四.今天是一个例外.中午写更新. 人到了不同的阶段,最重要的就是要更新自己的方法论.也就是说,不能穿新鞋,走老路,这样人就不会有大的突破. 下面我就分析 ...
- lego blocks
1.题目描述 https://www.hackerrank.com/challenges/lego-blocks 2.解法分析 这题乍看一下觉得应该可以用动态规划来做,但是却死活想不到最优子结构,在网 ...
- shell脚本操作mysql库
shell脚本操作mysql数据库-e参数执行各种sql(指定到处编码--default-character-set=utf8 -s,去掉第一行的字段名称信息-N) 2011-05-11 18:18: ...
- Improved logging in Objective-C
[Improved logging in Objective-C] Example of logging the current method and line number. Paste it in ...
- RedHat/CentOS6.4---永久关闭iptables
今天无意中发现一个现象,当我关闭iptables并且停止iptables服务,但是总会有一些出奇的事情发生,当我再次启动系统,查看iptables状态,iptables又自动开启,很是无奈啊!在Red ...
- JS初识(着重讲解Date函数)
查看类型:typeof() 转换为int类型:parseInt() isNaN() 函数用于检查其参数是否是非数字值. NaN,是Not a Number的缩写.一种计算机用语.NaN 用于处理计算中 ...
- C# JackLib系列之GdiHelper圆角矩形的快速生成
using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.D ...
- 编译ffmpeg(iOS)
一,x264库的编译 首先到http://www.videolan.org/developers/x264.html下载x264的库,然后解压,修改文件夹名称为x264 二,下载ffmpeg2 ...
- UI进阶 文件管理器(NSFileManager)文件对接器(NSFileHandle)
一.文件管理器与文件连接器之间的区别 文件管理器(NSFileManager) 此类主要是对文件进行的操作(创建/删除/改名等)以及文件信息的获取. 文件连接器(NSFileHandle) 此类主要是 ...
- 选择一本C++教材
从上周开始写如何使用C++编程以后,我发现这不是一个容易的题目.因此,我认真的看了一下C++相关的材料,发现现在为止,比较好的材料还是这些: 初学者: Accelerated C++,这是一本学习起来 ...