从这里开始,就开始接触使用分布式系统处理大数据了.在处理大数据之前,需要有一个场景,否则技术工具无法嵌入现实当中,价值就会降低.我碰到的场景应该还是比较具有普遍性,因此大家可以在我的场景里先玩一遍,熟悉一下流程和方法,然后加以改造,加载到自己的场景和环境中. 场景:在一个大型公司内部,终端和各个业务系统之间的数据传输都通过网络进行.出于监控的要求,需要在网络上获取所有数据包,并查看数据包里是否含有某些关键字.如果含有某些关键字,证明终端和业务系统间正在进行某种操作.系统记录下这些操作,用于实时显