论战大数据----胖子哥的PK之旅(一)
http://www.cnblogs.com/hadoopdev/p/3531963.html
nosqlt数据库-肖(380594863) 9:38:05
理论啊,没啥干货。
10:49:04彼岸蔷薇加入本群
nosqlt数据库-肖(380594863) 10:51:11
寂静的群啊
厂商联盟李光伟(7854251) 10:51:45
厂商联盟_Michelle(2085867176) 10:52:13
nosqlt数据库-肖(380594863) 10:52:33
大家讨论一下行业应用吧
厂商联盟李光伟(7854251) 10:54:25
什么是移动医疗
彼岸蔷薇(1757213615) 10:54:26
想接触大数据,还请前辈赐教啊
nosqlt数据库-肖(380594863) 10:55:34
我觉得移动医疗也是可以应用大数据的行业。
比如说心率监控,血糖监控,或者某方面疾病的监控,通过实时传送到云端,为个人量身定制医疗方案。
厂商联盟李光伟(7854251) 10:56:09
没错
nosqlt数据库-肖(380594863) 10:56:50
也可以通过对收集的数据分析人群、遗传学等大数据来提炼出针对性的药品
厂商联盟李光伟(7854251) 10:57:29
国家的医疗体制
厂商联盟李光伟(7854251) 10:57:42
国外已经有了吧
厂商联盟李光伟(7854251) 10:59:07
我们所见的的手机上Nike的应用,也是简单得一个例子吧
nosqlt数据库-肖(380594863) 10:59:37
未来可穿戴设备就是移动医疗的载体
厂商联盟李光伟(7854251) 10:59:45
运动员体制变化检测等
厂商联盟李光伟(7854251) 10:59:57
体质
nosqlt数据库-肖(380594863) 11:00:04
目前的解决方案貌似成本都很高啊
厂商联盟李光伟(7854251) 11:00:27
因为显得很高端
nosqlt数据库-肖(380594863) 11:00:47
但是平民化应用是必然方向
厂商联盟李光伟(7854251) 11:00:52
非生活必需品
厂商联盟李光伟(7854251) 11:01:09
私人定制服务
Benison(7746868) 11:01:28
传感器设备成本很高的
nosqlt数据库-肖(380594863) 11:02:41
不见得。现在是个智能手机都带GPS定位,未来的检测设备估计在身上某处贴个片片就能监测了,实时传送到手机,通过手机发送数据出去
Benison(7746868) 11:03:18
就是这个片片贵
厂商联盟李光伟(7854251) 11:03:29
黄金甲
nosqlt数据库-肖(380594863) 11:04:17
我只是这么想,抛砖引玉,看看大家还有别的大数据应用行业吗?
胖子哥(1106110976) 11:07:05
京-营销-完美帝(840451723) 11:00:29
大数据让常人看不懂
北京-架构-胖哥(1106110976) 11:01:02
http://www.cnblogs.com/hadoopdev/p/3531963.html
北京-架构-胖哥(1106110976) 11:01:28
其实是根本就不懂。
京-营销-完美帝(840451723) 11:01:32
链接发一遍就好了,
北京-架构-胖哥(1106110976) 11:01:33
方向都没找明白。
北京-架构-胖哥(1106110976) 11:01:50
刚刚这篇文章,有人给了评价,没有干货,我只想笑,什么是干货,干活吗?抬头看看路,有时候比低头干活来的要有意义的多。理念方向认知正确就是干货。
北京-架构-胖哥(1106110976) 11:03:05
第二次发,其实是回答你的问题。
京-营销-完美帝(840451723) 11:03:29
这个有道理,理念和技术要是结合起来就无敌了
北京-架构-胖哥(1106110976) 11:04:09
大数据要和企业具体业务结合,而非云里雾里的。
北京-架构-胖哥(1106110976) 11:04:15
瞎折腾,早晚要死。
北京-架构-胖哥(1106110976) 11:04:41
如果就解决关系型数据库存储的问题而言,大数据就有优势,就是存储。
北京-架构-胖哥(1106110976) 11:05:02
如果说平台运算能力,大数据就可以让你以低成本做高成本的事情。
北京-架构-胖哥(1106110976) 11:05:11
大数据其实很具体,很具体。
胖子哥(1106110976) 11:07:27
刚刚的聊天记录,恰恰能解决你的疑问。
高富帅(1341240135) 11:07:56
好
高富帅(1341240135) 11:09:15
好
nosqlt数据库-肖(380594863) 11:15:10
现在任何的数据库都不可能单独解决所有问题,必须结合,我说的干货,就是除了理念后的实际技术。
大数据必须建立在能大量存储,并随时调用的前提下才能实现大数据的优势。
客来乐-卢勋(63435967) 11:16:24
大数据-->数据大
nosqlt数据库-肖(380594863) 11:17:40
而我公司的nosqlt实时/历史数据库,就能做到数据存储无限大,只要硬盘够大(支持磁盘矩阵)多年数据都能导入。
抛开我们的每秒230万的吞吐量,无限存储的能力也是实现大数据的基本解决方法。
有了大数据(数据大)才能谈数据挖掘,对吧。
Benison(7746868) 11:20:24
大数据要解决的两个核心问题:1是存储,2是计算
厂商联盟李光伟(7854251) 11:21:19
大数据不单是数据大吧,一部视频才不过300M,但是要对其中出现人物进行人脸识别检索就不那么简单了
nosqlt数据库-肖(380594863) 11:22:11
大家研究方向不同,李总说的是数据挖掘层面的
nosqlt数据库-肖(380594863) 11:22:43
我们研究的方向是存储、传输数据库基础科学方面的。
dreamer(42997455) 11:23:08
存储还好吧,主要是计算
nosqlt数据库-肖(380594863) 11:23:16
说的通俗一点,我的理解是,一个是如何用的好数据,一个是如何把数据存下来。
邓文标(459383066) 11:27:20
还有一个数据质量的问题吧
邓文标(459383066) 11:27:43
没有好的数据质量,一切都是白搭...
nosqlt数据库-肖(380594863) 11:27:54
数据质量也是行业应用啊。只要有需求,我们都能存下来
nosqlt数据库-肖(380594863) 11:28:52
关于数据计算和挖掘的问题,貌似管理员李总他们有很多的解决方案。
邓文标(459383066) 11:31:17
对,数据质量还得靠业务的应用标准化支撑
Benison(7746868) 11:31:18
嗯
Benison(7746868) 11:31:53
是的,我们有这样的方案,但是我们现在有客户想做大数据仓库的概念,就是想替换已有的oracle数据库
Benison(7746868) 11:32:09
我们现在做的是数据挖掘方面的
胖子哥(1106110976) 11:36:02
不是替换
胖子哥(1106110976) 11:36:12
应该是局部领域的替换
胖子哥(1106110976) 11:36:20
前往不要跟客户说替换
胖子哥(1106110976) 11:36:41
大数据做不了传统关系型数据的事务型业务
胖子哥(1106110976) 11:37:07
我现在就怕这个替换俩字,去IOE
胖子哥(1106110976) 11:37:39
存个历史数据可以,提供查询,给现有系统减压。
胖子哥(1106110976) 11:37:53
目前的技术发展也就能做得到这个程度。
Benison(7746868) 11:49:27
是的,但是现在客户现在想做实时
胖子哥(1106110976) 11:49:55
实时查询可以
胖子哥(1106110976) 11:50:09
但是有一个数据特点的问题需要考虑进来。
胖子哥(1106110976) 11:50:21
如果只是些行为轨迹数据,无所谓的。
胖子哥(1106110976) 11:50:53
但是如果是传统该行业就不行,我要存,要修改,要删除。你拿大数据怎么做,不够添乱的呢。
胖子哥(1106110976) 11:51:20
更主要的是,你让人原有的系统都废掉吗。利旧问题是一个让人很头疼的问题。
Benison(7746868) 11:53:59
是啊,特别是逻辑性的东西
胖子哥(1106110976) 11:57:00
被惯坏了的客户
胖子哥(1106110976) 12:01:53
我建议把这些聊天记录做成一篇博文,
胖子哥(1106110976) 12:01:59
让大家共享一下。
nosqlt数据库-肖(380594863) 12:04:52
其实还有一个解决方法。
先理清一下问题。sql无法做实时为什么?
性能问题。数据量最多5000笔,如果能做到百万级数据量这也能从侧面解决实时问题吗?
能不能通过nosqlt实时数据库挂在前端,专门解决实时查询的需求。后面的文档、视频、图片还是由SQL来管,分布成不同的服务器。nosqlt来根据需求分散查询需求。这样就能做到实时。
另外能不能问问,用户需要的实时主要是什么类型的数据。文档、影像、图片或者是设备自动采集的数据。
情花开(50841692) 12:05:51
实时数据量最多5000笔?
情花开(50841692) 12:06:15
这个那来的权威说法?
论战大数据----胖子哥的PK之旅(一)的更多相关文章
- 云计算分布式大数据神器Spark实战高手之旅
从2012年1月份研究Spark到如今已经两年多的时间了. 在这两年多的时间里比較彻底的研究了Spark的源码并已经在2014年4月24日编写完毕了世界上第一本Spark书籍. 鉴于CSDN在大陆IT ...
- 胖子哥的大数据之路(7)- 传统企业切入核心or外围
一.引言 昨天和一个做互联网大数据(零售行业)的朋友交流,关于大数据传统企业实施的切入点产生了争执,主要围绕两个问题进行了深入的探讨: 问题1:对于一个传统企业而言什么是核心业务,什么是外围业务? 问 ...
- 胖子哥的大数据之路(11)-我看Intel&&Cloudera的合作
一.引言 5月8日,作为受邀嘉宾,参加了Intel与Cloudera在北京中国大饭店新闻发布会,两家公司宣布战略合作,该消息成为继Intel宣布放弃大数据平台之后的另外一个热点新闻.对于Intel的放 ...
- 胖子哥的大数据之路(10)- 基于Hive构建数据仓库实例
一.引言 基于Hive+Hadoop模式构建数据仓库,是大数据时代的一个不错的选择,本文以郑商所每日交易行情数据为案例,探讨数据Hive数据导入的操作实例. 二.源数据-每日行情数据 三.建表脚本 C ...
- 胖子哥的大数据之路(9)-数据仓库金融行业数据逻辑模型FS-LDM
引言: 大数据不是海市蜃楼,万丈高楼平地起只是意淫,大数据发展还要从点滴做起,基于大数据构建国家级.行业级数据中心的项目会越来越多,大数据只是技术,而非解决方案,同样面临数据组织模式,数据逻辑模式的问 ...
- 胖子哥的大数据之路(6)- NoSQL生态圈全景介绍
引言: NoSQL高级培训课程的基础理论篇的部分课件,是从一本英文原著中做的摘选,中文部分参考自互联网.给大家分享. 正文: The NoSQL Ecosystem 目录 The NoSQL Eco ...
- 胖子哥的大数据之路(四)- VisualHBase功能需求框架
一.引言 大数据在结构化数据存储方面的应用需求越来越明确,但是大数据环境下辅助开发工具的不完善,给数据库管理人员和开发人员带来的不变难以言表,基于此创建了开源项目VisualHBase,同时创建了Vi ...
- 【大数据之数据仓库】GreenPlum PK DeepGreen(TPCH)
1.背景 一张UML类图可以简单的说明GreenPlum和DeepGreen之间的关系: GreenPlum: 主页:http://greenplum.org/ 源码:开源,https://githu ...
- ASP.NET + SqlSever 大数据解决方案 PK HADOOP
半个月前看到博客园有人说.NET不行那篇文章,我只想说你们有时间去抱怨不如多写些实在的东西. 1.SQLSERVER优点和缺点? 优点:支持索引.事务.安全性以及容错性高 缺点:数据量达到100万以 ...
随机推荐
- Awk 从入门到放弃 (7) 动作总结之二
第一题: 使用if语句进行判断
- SQL Server 调优系列进阶篇 - 如何重建数据库索引
随着数据的数据量的急剧增加,数据库的性能也会明显的有些缓慢这个时候你可以考虑下重建索引或是重新组织索引了. DBCC SHOWCONTIG('表名') 可以查看当前表的索引碎情况. 重建索引 方法一: ...
- Scrapy-redis实现分布式爬取的过程与原理
Scrapy是一个比较好用的Python爬虫框架,你只需要编写几个组件就可以实现网页数据的爬取.但是当我们要爬取的页面非常多的时候,单个主机的处理能力就不能满足我们的需求了(无论是处理速度还是网络请求 ...
- C++零散知识点
CString strDayofWeek = _T(""); 的意思 1.sComment是自定义的CString类型变量,代表什么意思自己说了算2._T是一个宏,作用是让你的程序 ...
- SharePoint 解决方案和功能-PowerShell
1. 添加解决方案到SharePoint场 Add-SPSolution "c:\newsolution.wsp" 2. 获取场中的解决方案 Get-SPSolution 3. 获 ...
- pyqt5:图片自适应QLabel大小和图片移除
参考链接: https://www.e-learn.cn/content/qita/669569 图片自适应QLabel大小 # coding=utf- import sys from PyQt5.Q ...
- IOS沙盒机制
一,ios应用程序只能在为该程序创建的文件系统中读取文件,不可以去其他地方访问,此区域被称为沙盒 1,每个应用程序都有自己的存储空间 2,应用程序不能翻过自己的围墙去访问别的存储空间的内容. 3,应用 ...
- HDU 4240
http://acm.hdu.edu.cn/showproblem.php?pid=4240 题意:求最大流和流量最大的一条路径的流量的比值 题解:流量最大的路径的流量在dinic的dfs每次搜到终点 ...
- 关于Gson无法将匿名类转化为json字符串的问题
在使用gson过程中,一般会将数据存在一个对象模型中,使用gson将模型转换成json字符串用于数据交互. 代码形如: ArrayList<String> list = new Array ...
- /proc/sys/vm/drop_caches 清理缓存
1. 使用方法 /proc/sys/vm/drop_caches默认是0 # echo 1 > /proc/sys/vm/drop_caches; free pagecache, use# ec ...