DT时代,如何成为十字复合型数据分析师 当前社会正从IT到DT智能时代,传统行业嫁接互联网,产生的是加法效应:大数据创新驱动,产生的是乘法效应,价值呈指数递增.DT时代拼的是人才和创新价值的能力,拼的是你的数据能够给社会创造多少价值,用数据挣钱才是未来真正所在. 相应的,DT时代对人才的要求也越来越高,人才的进步也从"1"字型人才到"T"字型人才再进化到"十"字型人才.所谓"1"字型人才是指具备某个领域的专业深度,但往往会一条…
最近忙着找实习,来学校一个星期还没到,就感觉已经经历了几个春秋. 第一个实习面试是个杭州互联网小公司,面WEB前端开发实习,怪我一个暑假两个月一点书都没碰,偏偏赶上G20到9/9才开学,没啥准备就一头扎进面试浪潮.一问三不知,简直是丢我们学校的脸啊.灰溜溜跑回学校不禁感叹:这三年自我感觉认真学习,然并卵!各种纠结过后还是决定给自己时间准备,重头再来! 以前很奇怪,老师上课.自己浏览网页的时候看的一些东西感觉有用,但是很快又忘了,现在反而温故知新.这是不是叫人总是无逼不潜力!今天对一些老早就火起来…
在此系列中,笔者为大家带来一些以数据分析师视角去使用Sqlserver的系列文章,希望笔者走过的路能够给后来者带来一些便利. 背景介绍 在数据分析师的角色下,使用数据库更多的是为了从数据库中获取数据,和数据库交互的语言是SQL,因此最快速写出想要的SQL语句查询就显得非常有必要了,毕竟不是在分析的路上,就是在写SQL语句查询的路上,相当地高频. 用原生的SSMS提供的功能很单薄,还好,微软一般都会开发第3方插件接口,让第3方来参与完善非核心功能. 笔者使用过较好用的插件工具有SQLPrompt和…
在前面系列文章的讲述下,部分读者有兴趣进入Sqlserver的世界的话,笔者不太可能在自媒体的载体上给予全方位的带领,最合适的方式是通过系统的书籍来学习,此篇给大家梳理下笔者曾经看过的自觉不错值得推荐的Sqlserver书单,希望能够给后来者带来一些指引和少走一些弯路. 最好的时代亦是最坏的时代 当下的自媒体时代,信息量非常丰富,连笔者这样的没有严密逻辑性的人,亦有机会通过自媒体的平台来展现一翻.在自媒体上时效性也是非常好,想写就写,读者群也可以不断地追更. 但一股知识付费的妖风也横刮过来,现在…
前面我们以相同的方式从数据分析师的视角介绍了Sqlserver,本系列亦同样地延续下去,同样是挖掘数据分析师值得使用的Azure云平台的功能.因云平台功能太多,笔者所接触的面也十分有限,有更专业的读者欢迎补充. 对云服务的一点点小认识 笔者接触Azure云时间不长,因没有IT背景,故对各大云市场也只能是浅尝即止,有关注Excel催化剂插件的读者们,也应该对笔者使用其他云市场有一些的了解. Excel催化剂的自动更新机制是放到阿里云上完成的,对应的云服务是构建云服务器(比虚拟主机要高级,可以完全自…
简介 越来越多的政府机关.企事业单位将选择拥有数据分析师资质的专业人士为他们的项目做出科学.合理的分析.以便正确决策:越来越多的风险投资机构把数据分析师所出具的数据分析报告作为其判断项目是否可行及是否值得投资的重要依据:越来越多的高等院校和教育机构把数据分析师课程作为其中高管理层及决策层培训计划的重要内容:越来越多的有志之士把数据分析师培训内容作为其职业生涯发展中必备的知识体系.国内数据分析行业刚兴起,企业对此类行业的人才需求相对较大,未来前景比较广阔. 工作职责 数据分析师指的是不同行业中,专…
DT时代,企业更需构建精准数据分析体系 随着互联网的飞速发展,信息的传输日益方便快捷,需求也日益突出,纵观整个互联网领域,大数据已被认为是继云计算.物联网之后的又一大颠覆性的技术性革命,毋庸置疑,大数据市场是待挖掘的金矿,其价值不言而喻.可以说谁能掌握和合理运用用户大数据的核心资源,谁就能在接下来的技术变革中进一步发展壮大. 大数据,可以说是史上第一次将各行各业的用户.方案提供商.服务商.运营商以及整个生态链上游厂商,融入到一个大的环境中,无论是企业级市场还是消费级市场,亦或政府公共服务,都正或…
马云曾在一次演讲中说:"人类正从IT时代走向DT时代."那DT究竟是什么,和IT有什么不同呢?我们对IT非常熟悉,它是信息技术(InformationTechnology)的英文缩写,IT时代主要是自我控制和自我管理.DT是数据处理技术(DataTechnology)的英文缩写,DT时代主要是大众.激发生产力的技术.两者表面上看似只是技术上的差异,实际上是思想上的差异. 随着DT时代的到来,用BI工具代替手工统计分析数据已经成为许多企业应用于业务运营的秘密武器.一个好的BI工具可以有效…
(此文章同时发表在本人微信公众号“dotNET开发经验谈”,欢迎右边二维码来关注.) 题记:在上个月的Connect() 2016大会上,微软宣布了VS 2017 RC的发布,其中为数据分析师带来了一体化的开发环境. 我们知道Visual Studio 2017带来的一大改变就是,轻量级的快速安装模式:把各种功能特性按照开发领域(Workload)进行组织划分,安装的时候只需要选择自己所需要用到的那部分开发领域就可以快速完成VS的安装. 随着数据科学越来越热门,在刚刚发布的VS 2017 RC中…
拉勾因其结构化的数据比较多因此过去常常被爬,所以在其多次改版之下变得难爬.不过只要清楚它的原理,依然比较好爬.其机制主要就是AJAX异步加载JSON数据,所以至少在搜索页面里翻页url不会变化,而且数据也不会出现在源代码里. 数据解析 这是深圳地区的数据分析师页面,用Chrome检查打开.在XHR中可以看到一个以postionAjax.json开头的脚本,打开Preview看一下,可以看到: 可以发现这些数据与前端的数据一致,此时我们已经找到了数据入口,就可以开始爬了. 数据爬取 在Header…