spark 你要喧宾夺主么?好好干。】的更多相关文章

hi 好久没写,昨儿一写,感觉还是有人看的,至少是有一两个评论的~~好好干! 每天需要坚持的就那么4件事儿:写这个,学一点法语,看会儿书,锻炼.单身狗也有好处. 1.PHP 一.PHP基础(二) 1.3 数据类型 8种——4种标量:布尔boolean,整型integer,浮点float/双精度double,字符串string:2种复合:数组array,对象object:2种特殊:资源resource,NULL无: 推荐记住英文,在学习的过程中,变量通常都是这么来命名的. php是弱类型语言,也就…
昨天,京东裁员消息被证实,京东将在2019年末位淘汰10%的副总裁级别以上的高管. 在互联网职场交流社区,一名自称京东的员工如此吐槽:办完离职了心情大好,自由放飞,明天入职新公司,你给新员工打C,还希望我给你好好干,领导,你想啥呢?京东你嫌弃我工资高,那就不要录用我啊,下家公司比你京东多给一万. 很显然,这名京东前员工入职没多久,绩效不好故而离职.对于这名京东员工的吐槽以及获得的新工作机会,同行网友纷纷发来祝贺:恭喜出坑,话说楼主你找工作找了多久:恭喜恭喜,一直找不到合适的:下家面试问你的绩效,…
嗯嗯,hadoop EcoSystem.…
原文地址:http://blog.jobbole.com/?p=89446 我是在2013年底第一次听说Spark,当时我对Scala很感兴趣,而Spark就是使用Scala编写的.一段时间之后,我做了一个有趣的数据科学项目,它试着去 预测在泰坦尼克号上幸存.对于进一步了解Spark内容和编程来说,这被证明是一个很好的方式.对于任何有追求的.正在思考如何着手的Spark开发人员,我都非常推荐这个项目. 今天,Spark已经被很多巨头使用,包括Amazon.eBay以及Yahoo!.很多组织都在拥…
Spark中的shuffle是在干嘛? Shuffle在Spark中即是把父RDD中的KV对按照Key重新分区,从而得到一个新的RDD.也就是说原本同属于父RDD同一个分区的数据需要进入到子RDD的不同的分区. 但这只是shuffle的过程,却不是shuffle的原因.为何需要shuffle呢? Shuffle和Stage 在分布式计算框架中,比如map-reduce,数据本地化是一个很重要的考虑,即计算需要被分发到数据所在的位置,从而减少数据的移动,提高运行效率. Map-Reduce的输入数…
知乎上看到这个问题 正好最近想写篇关于此的文章,于是就回答了一波. 也贴到这里来,回答如下 : 本问题简直为我量身定制,做为一个正在创业中的苦逼少年,说说我是如何从鼓吹怂恿身边人创业转换成反对创业的.我本想自己写篇文章说这事,正好在这讲吧,文章名字都 想好了,叫 "没事千万别他妈瞎B创业" 说脏话是为了强调语气. 2011年,我在金融公司做技术,经常坐在国贸大厦24层茶水间往下看车水马龙发呆, 公司是NB呀,但跟自己有什么关系呀?别人一听你公司名字,就羡慕的很,只有自己知道那种没人ca…
经过一段时间的学习和测试,是时候给spark的学习经历做一个总结了,对于spark的了解相对晚了写.春节期间(预计是无大事),本博准备推出20篇左右spark系列原创文章(先把牛吹出去再说) ,尽量将枯燥无味的技术讲的通俗易懂- r.kelly 2013年的时候第一次听说spark这么个神器,那时候它还幼小,没什么人鸟它,但是它强大基因注定了它不是个凡夫俗子, 故事就是从那一小撮人群中开始的. 一.Spark何许人也 姓名:Spark 性别:未知 出生地:加州大学伯克利分校AMP实验室 出生年月…
屌丝职场记 投递人 itwriter 发布于 2013-05-27 09:21 评论(18) 有3402人阅读  原文链接  [收藏]  « » 作者@幻想哥呀幻想哥 有一位屌丝男,从小抱着报效祖国的理想上了大学,毕业后干了 IT 行业,高中那时候看文汇报说,搞 IT 的在上海 3 年拿 10W 年薪算低的.屌丝男算了一下, 6000 块就能买一台戴尔台式机,现在 10W 年薪就是 2 个月就可以买 3 台戴尔台式机,那得多牛逼啊!果断干这个! 屌丝进入 IT 行业其实很曲折,整整半年,他每天跑…
AI即人工智能,对科幻着迷的博主对此认知颇深,打算从科幻电影入手,先讲下未来的AI将给人类带来哪些变化,哪些思考. 从最初的<星际航行>中的各种星球.地形等的介绍,到各个鉴于的探索,以及其中问题的出现和解决,Data即是AI的一个结果,存储大量信息.力量大.对人类好感.趋向人类情感的进化.舍己为人等行为和特征,具备定位和数据传输功能,成为人类向外星球传播文明的最佳伙伴.这其中介绍的宇宙飞船,以及其他辅助装置,必须有AI的元素在内,但DATA成为大多数人身边可能存在的对象,而给人印象深刻,它会不…
数据分析侠A的成长故事 面包君  同学A:22岁,男,大四准备实习,计算机专业,迷茫期 作为一个很普通的即将迈入职场的他来说,看到周边的同学都找了技术开发的岗位,顿觉自己很迷茫,因为自己不是那么喜欢钻研写代码,而自己又没太多的经验.那年他实习,选择了一家国内一线梯队的电商公司,HR问道想选择什么岗位,而他本人自己也比较困惑,说对数据感兴趣.而恰好那年公司打算成立一个数据部门,就把同学A分配到了市场部的数据组.那时候主管是来自新浪背景的网站分析师.赶上了电商大潮,大家交流的比较多的就是网站分析的P…
PS: 唉.本来这一篇前几天早就应该发了的,可是谁每月没有那么几天啊... 呵呵.开个玩笑.反正就是各种烦气,所以也就一直没上来继续发了. 年底了,摆正一下心态吧.好好干,整点钱,过年回家能跟亲朋好友好好装装逼啊是不.哈哈. 本篇目录: 1. 控制器的角色 1.1 控制器简史 2. 控制器基础 2.1 简单示例:HomeController 2.2 创建第一个控制器 2.2.1 创建新控制器 2.2.2 编写操作方法 2.2.3 经验总结 3. 小结 ▁▃▅ 控制器 ▅▃▁ 本篇将阐述ASP.N…
最近总有些朋友想创业,咨询我的意见. 一般是在公司干腻了,有个想法,想出来试试水.还有是觉得自己的idea太棒了,想试试. 相同的是两者都有点怕.听说最近创业环境不好,没有投资!有个朋友推荐的创业者,打电话过来激情澎湃的跟我说了他idea."还有很多更好的,我都不敢告诉别人啦..." 我基本上都用最冰冷的声音告诉他:我建议你慎重,或者老老实实打工.没有比创业更困难的事情!而且千万别试! 这操蛋的两年! 第一个半年,我们3个人[三个程序员,6-8年工作经验]没有白天黑夜的加班,计划在半年…
看了不少大神的退役帖,今天终于要本弱装一波逼祭奠一下我关于ACM的回忆. 从大二上开始接触到大三下结束,接近两年的时间,对于大神们来说两年的确算不上时间,然而对于本弱来说就是大学的一半时光.大一的懵懂浪费了我太多的时间,甚至现在都在后悔为什么不是在大一的时候才知道acm并参与到其中.其实对我现在来说大二已经不算晚了,但是比较悲剧就是没有真正学习,只是开会打酱油,听听zhoubo给我们打鸡血,对算法数据结构并没有什么概念,甚至有 "排序为什么用那么复杂的快排,冒泡不是很简单吗“ 这样愚蠢的想法,目…
 在IT界取得成功应该知道的10件事 2011-08-11 13:31:30 分类: 项目管理 导读:前面大多数文章都是Jack Wallen写的,这是他的新作,看来要成为NB程序员还要不停的自我总结. 1. 厚脸皮 - Thick skin 让我们面对现实吧.从各个方面来说,IT业从业人员很难受到欢迎.昨天有人坚持让你完成一项工作,如果你不好好干的话,你将会马上丢掉工作,因为客户 的数据文件无法修复.看起来,不管你的技术多么出色,如果你不能容忍客户尖酸刻薄的批评和指责的话,你将无法取得成功.当…
前言 PS. 本文只描述IT行业. 博客园果真人气比较高,我之前准备写个 "领域驱动系列",然后感觉大家不感兴趣,看来用的人不多,所以一直没动力续,但是昨天写了 [加班有罪] (http://www.cnblogs.com/cnblogsfans/p/4431160.html), 却收到了很多个赞,让我感到有点意外. 我今天看了很多评论,感觉很欣慰,大家其实对加班的看法和担忧其实都是正确的,但是很多人可能忽略了一些前提,如果盲目的下班就走,数着秒下班,那我写这篇文章就有罪了. 为什么加…
茫然的求索 那一年,刚好经济危机,毕业了.经过了很长时间的“网上海投”而杳无音讯之后,终于发现“经济危机真的和自己有点关系了” ,曾经以为经济危机和自己巴刚子打不着. 拿着简历,开始到处去跑招聘市场,又发现,人才招聘市场里面的计算机岗位特别少,满街的招聘销售.即便有一两家招聘技术人员的,但是又被各种“硬性指标”拦在门外. 看着钱包里面的钱一张张的变少,没有时间郁闷,也不能待在家里,没有收入的日子,待在家里就是耗钱.武汉的夏天很热,在家里带着要吹电扇(没有空调,使用空调那是很奢侈的),另外在家里要…
前言 首先发一点牢骚,互联网公司变化就是快,我去一个团队往往就一年时间该团队就得解散,这不,公司居然把无线团队解散了,我只能说,我那个去!!! 我去年还到处让人来呢,一个兴兴向荣的团队说没就没了啊!我找谁哭去...... 于是我们团队一个大哥说他去哪哪就解散,我老大说他去哪哪就倒霉,如此看来,不是我们导致团队解散,而是所有的团队变化都快啊...... 于是换了个团队,近几周情绪较低落啊,但是低落也不能不干实事,所以在此收拾心情明天开始好好干事情吧! 在去年的时候,我们初略的学习了下backbon…
花絮 也许会有人感叹某些人的运气比较好,但是他们不曾知道对方吃过多少苦,受过多少委屈.某些时候就是需要我们用心去发现突破点,然后顺势而上,抓住机遇,那么你将会走向另外一条大道,成就另外一个全新的自我. 先简单说说我最近的面试经历吧.面试的公司很多,其中有让我心血沸腾的经历,也有让我感到失望到无助的经历,我将这些体会都记录下来,细想之后很值得,面了这么多公司,要是最后什么也没有留下来,那就太浪费了.至少对于我来说有些东西在整理总结之后才能得到一个肯定的答案.希望这些能对即将换工作或者打算看看机会的…
1. 函数的定义: 返回值类型 函数名(形参列表) {函数体(函数的实现内容)}, 注意: 如果没有参数, 小括号也是必不可少的.  函数与函数之间可以嵌套调用(也就是在一个函数内部可以调用另外一个函数), 但是不能嵌套定义(不能在一个函数内部定义另外一个函数) 形参: 形式上的参数, 在函数定义时, 给定的参数叫做形参, 是一个一个的变量, 存储的数据在调用之前完未知 实参: 函数调用时给定的参数叫做实参, 是一个唯一确定的数据. 实参向形参传递的过程是一个拷贝的过程 函数相当于公司的部门,…
2016年同2015年一样,在我还没有做好心理准备的时候,一晃神就到了年底.年关将近,不知诸君心情如何,年初的规划实现了多少,来年的计划又是否已有了眉目.年过三十的Peak君感觉年关是越来越难过了,越喧嚣的时候越想静处,感慨越多能说出口的反而越少. 近来有读者问Peak君为何最近这么多产,原因无他,仅为缓解年关将近的焦虑感.今年要说有什么收获,该算发现坚持写字所带来的好处.最近感觉尤其明显,只有沉浸在技术的纹理脉络之中时,才能像老僧坐定一样心无所想.看着博客和公众号里40多篇技术文章时,总算能略…
php5.5新增 Finally模块 try {    //好好干,出了问题不要怕,外面有人接应} catch (HttpException $e) {    //时刻准备着,处理上面抛出的HTTP问题} catch (Exception $e) {    //时刻准备着,处理他们都处理不了的问题} finally {    //打扫战场,都收拾好了再走人} try 中 return 后 finally 会继续执行,如果 finally 中也有return,则最终返回值为 finally 中 r…
  人的寿命应该能达到100 至175 岁,为什么都没有达到呢?最主要一个原因就是我们不重视保健,不懂得保健的知识.很多人死于无知,这很冤枉啊! 大家知道怎么保健吗?国际上有个维多利亚宣言,宣言里有三个里程碑:第一个叫平衡饮食,第二个叫有氧运动,第三个叫心理状态.这三个里程碑,国际上都知道,而我们很多人不清楚.三个里程碑的标题不会变,但内容会随时改变. 一.平衡饮食 下面我讲第一个问题,平衡饮食.所谓平衡饮食,有饮和食两大类. 1."饮"的问题 国际会议上提出了六种保健品:第一绿茶:第…
这篇文章用来总结一下2013,同时也分享一下我对中国IT项目现状的一些看法. 我先从项目说起.这里的项目主要是指的软件开发项目.我们分别从项目中的甲方和乙方谈谈,看看这两者对于项目.对应IT的认识和观点. 甲方 这是个很简单的事情 “不就建几个表的事情吗?,怎么让你说的那么复杂!?”--现在甲方都知道什么是表了 我们的需求很明白!就这“两页纸” “已经很明确了,领导就是这个意思,开始弄吧!”-- 确实是“很明确” “还不清楚啊?我们其实就是要个ERP!” -- 厉害了,3个月要开发一个ERP 合…
背景: 在我们做那个招标项目的时候,由于是刚刚接触到这个BS东西,我基本上是什么也不会.可是当时组长浩哥给过我一个任务,就是叫我将数据里面以字符串形式存在的信息切割开,然后显示到前台上去.当时对于浩哥来讲,说这是一个小活儿,让我好好干!可是我费劲巴力的做了一段时间后,还是没有做出来,最终还是浩哥帮我做的.当时感觉自己什么都不会,   好--菜! 好了,废话少说,看我们的分享吧: 代码演练: No1.我们建立一个前台界面,来显示我们做实验用的数据: 是不是很简单? No2.我们去写一个Jscrip…
翻来翻去,总是睡不觉.大脑口一堆问题.一个又冒出一个,没完没了.明天该怎样去进行下一步呢.. ….. 夜一下子深黑很多,窗外的公路,时而有货车通过,动不动按喇叭,而我住在二楼,真它的吵.也许她住在五楼听不到吧,也许她现在进入美梦中,也许...... 分析一下 我和MM吃饭过程中,MM都处在不好意思状态下,可能很激动,很开心. 在我表白时,她明显非常激动. 在握手时,虽挣扎了一下,不过很快就放弃了.说明她能接受. 综上MM可追机会上达80%. 机会达80%了,稳定性还得加强. 躺在床上的我,此时此…
原题模型:两者(A,B)不能同时取 #include "cstdio" #include "vector" #include "stack" #include "cstring" using namespace std; #define maxn 2010 ; ]; int S[maxn],T[maxn],D[maxn],pre[maxn],sccno[maxn],lowlink[maxn],id[maxn],cfl[maxn…
Hello,大家好! 不对,这个开头有点不对.我不应该这么说,这个博客我是为我自己而开通的.目的很简单,好记兴不如烂笔头,把每天所学所感写下来. 我想作一个有条理的人,一个有计划的人,一个有效率的人.我相信,因为博客,我的生活会有所改变. 时间是宝贵的,这里有时间管理的几句话,下面的内容引自 http://www.ruanyifeng.com/blog/2016/05/time-management.html 1,进程切换非常昂贵,避免多任务,保持单进程.--不要同时做多件事,结果可能都没做好,…
好久没有写博客了,在这么特殊的日子里,似乎不写点东西感觉总是少了点什么.其实从昨天开始就在努力的回忆,回忆自己这个2014年都做了些什么?自己收获了些什么?突然就觉得去年的那个暑假是那么的熟悉,怎么又过了一年.真是...泪流满面啊!想要把2014的一切值得记忆的东西写下来,只是想要提醒自己这一年我没有浪费.也算是安慰自己,嗯!我也算努力,还是有很多的进步的. 记得年初的时候就和同学赶紧来到了西安,那时临近毕业,就业的压力真的让人很难受.看着以前的好伙伴们一个一个都在校招中找到了自己的位置,可惜自…
来自:http://www.guigu.org/news/guigushijie/2013102140759.html 腾讯CEO马化腾正在内部大搞思想整风运动,此时,猎云网独家获得数封来自腾讯内部的举报邮件.邮件直指腾讯无线HR高层滥用权利,管理上搞内部斗争,招聘工作上不负责任.其中,一位身为腾讯员工的举报人气愤地表示,HR有点能耐就玩弄员工. 猎云网全文刊登邮件,仅对邮件真实性负责,对于举报内容所涉及到腾讯HR内部出现的问题,猎云网不作任何评论,刊登目的仅是传递信息.对于文中涉及人物姓名,猎…
不好,有点肚子疼,凉肚子了. 今天晚上回来看了个电影<聚焦>,貌似明白了一个道理,任何一份职业,只要认识到了它的价值,那就好好干. 计划又放在脑门后了,上班又闲扯了一天.老季公司招人,让我给找..哎.试试吧,真找不到也没办法. 刘松他媳妇怀孕了,好了,睡觉.…