一.启动RocketMQ [root@master ~]# cat /etc/hosts # Do not remove the following line, or various programs # that require network functionality will fail. 127.0.0.1               localhost.localdomain localhost ::1             localhost6.localdomain6 local…

最近想做一个app,为小朋友推荐十万个为什么的故事,但是找了很久数据,发现挺难的找的,又去写爬虫,发现没有一个好的网站可以爬,最后一个偶然的机会在csdn上发现一个可用的接口,很快就把问题解决了,下面附上java实现方式,有兴趣的可以一看: package com.xiaocongjisuan.module.example; import java.io.BufferedReader; import java.io.DataOutputStream; import java.io.IOExcep…

前言 在上一篇中讲述如何搭建kafka集群,本篇则讲述如何简单的使用 kafka .不过在使用kafka的时候,还是应该简单的了解下kafka. Kafka的介绍 Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据. Kafka 有如下特性: 以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间复杂度的访问性能. 高吞吐率.即使在非常廉价的商用机器上也能做到单机支持每秒100K条以上消息的传输. 支持Kafka Serv…

一.项目背景二.项目架构三.项目实现3.1.数据生产3.1.1.数据结构3.1.2.编写代码3.1.3.打包测试3.2.数据采集/消费(存储)3.2.1.数据采集:采集实时产生的数据到 kafka 集群3.2.2.编写代码:数据消费(HBase)3.2.3.编写测试单元:范围查找数据(本方案已弃用,但需掌握)3.2.4.运行测试:HBase 消费数据3.2.5.编写代码:优化数据存储方案3.2.6.运行测试:协处理器3.2.7.编写测试单元:范围查找数据 一.项目背景   通信运营商每时每刻会产…

/** * 2019年8月8日17:42:23 * 目的:Java多线程实现生产与消费 * @author 张涛 * * 多态: * 一个父类的引用既可以指向父类对象 * 也可以指向子类对象 * 它会根据当前时刻指向的不同 * 自动调用该对象里面的属性和方法 * * this: * this在构造方法中表示正在构造的对象 * this在一般方法中表示正在调用的对象 */ //构建栈(杯子)类 class synstack { //数组相当于货架,每次只能放入6个 char[] data = ne…

我是3y,一年CRUD经验用十年的markdown程序员‍常年被誉为优质八股文选手 今天继续更新austin项目,如果还没看过该系列的同学可以点开我的历史文章回顾下,在看的过程中不要忘记了点赞哟!建议不要漏了或者跳着看,不然这篇就看不懂了,之前写过的知识点和业务我就不再赘述啦. 今天要实现的是handler模块的消费数据隔离.在聊这个之前,先看下之前的实现是怎么样的. austin-api接收到了请求之后,将请求发往Kafka,topicName为austin.而在austin-handler起…

目录 一. 通过rmi实现远程服务的生产与消费 远程服务提供者实现. 创建rmi-provider项目(Maven) 远程服务消费者实现 创建rmi-consumer项目 二. 通过WebService实现远程服务的生产与消费 远程服务提供者实现. 查看远程服务文档wdsl 远程服务消费者实现. 三. 通过HttpClient实现远程服务的生产与消费 远程服务提供者实现 远程服务消费者实现 四. 通过spring提供的RestTemplate实现远程服务的生产与消费 远程服务消费者实现. 本文将…

1. 首先启动zookeeper windows上的安装见zk 02之 Windows安装和使用zookeeper 启动后见: 2. 启动kafka windows的安装kafka见Windows上搭建Kafka运行环境,启动后如下图: 3. 核心代码 生产者生产消息的java代码,生成要统计的单词 package com.sf.omcstest; import java.util.Properties; import kafka.javaapi.producer.Producer; impor…

1.首先需要两个jar包jxl.jar,ojdbc.jar(注意版本,版本不合适会报版本错误)2.代码: Java代码   import java.io.File; import java.io.FileInputStream; import java.io.IOException; import java.io.InputStream; import jxl.Cell; import jxl.Sheet; import jxl.Workbook; import jxl.read.biff.Bi…

之前在公司机房部署了一套jenkins环境,现需要迁移至IDC机房服务器上,迁移过程中记录了一些细节:1)jenkins默认的主目录放在当前用户家目录路径下的.jenkins目录中.如jenkins使用root用户启动,则主目录为/root/.jenkins [root@code-server ~]# ll -d /root/.jenkins/ drwxr-x--- 14 root root 4096 Dec 18 15:22 /root/.jenkins/ 2)可以在系统环境变量里手动设置je…