一.Kafka命令行操作 1.查看当前集群已存在的主题 bin/kafka-topic.sh --zookeeper hd09-01:2181 --list 2.创建主题 bin/kafka-topic.sh --zookeeper hd09-01:2181 --create --relication-factor 3 \ >--partition 1 \ >---topic xinnian 3.删除主题 bin/kafka-topic.sh --zookeeper hd09-01:2181…

Kafka命令行操作 1)查看当前服务器中的所有topic [test@ip101 kafka]$ bin/kafka-topics.sh --zookeeper ip101:2181 --list 2)创建topic [test@ip101 kafka]$ bin/kafka-topics.sh --zookeeper ip101:2181 --create --replication-factor 3 --partitions 1 --topic first 选项说明: --topic 定义…

Kafka命令行操作 1)查看当前服务器中的所有topic [bingo@hadoop101 kafka]$ bin/kafka-topics.sh --list --zookeeper hadoop101:2181 2)创建topic [bingo@hadoop101 kafka]$ bin/kafka-topics. --replication-factor --partitions --topic first 选项说明: --topic 定义topic名 --replication-fac…

平时用可视化界面用惯了,如果紧急排查问题,没有安装可视化工具的话,只能通过命令来看了. 以备不时之需,我们要熟悉一下命令行操作MySQL. 打开DOS命令窗口:WIN + R 输入cmd,回车 然后输入命令:mysql -uroot -proot -h127.0.0.1  [-u 用户名 -p密码 -h host地址] 这里连接的是本地MySQL服务(先确保服务已启动) 输入 show databases; (有分号) 输出所有数据库 输入use demo 切换到demo数据库 输入show t…

1.创建主题(topic) bin/kafka-topics.sh --create --zookeeper m6:2181 --replication-factor 1 --partitions 1 --topic test 2.查看主题 bin/kafka-topics.sh --list --zookeeper m6:2181 3.向主题发送消息(生产者) bin/kafka-console-producer.sh --broker-list localhost:9092 --topic…

登陆mysql harvey@harvey-Virtual-Machine:~/ruby/mydiary$ mysql -u root -p Enter password: Welcome to the MySQL monitor. Commands end with ; or \g. 查看所有的数据库 mysql> show databases; --注意必须要用;结尾否则不会立即执行代码 +--------------------+ | Database | +---------------…

1.  概述 数据层:结构化数据+非结构化数据+日志信息(大部分为结构化) 传输层:flume(采集日志--->存储性框架(如HDFS.kafka.Hive.Hbase))+sqoop(关系型数据性数据库里数据--->hadoop)+kafka(将实时日志在线--->sparkstream在数据进行实时处理分析) 存储层:HDFS+Hbase(非关系型数据库)+kafka(节点上默认存储1G数据) 资源调度层:Yarn 计算层:MapReduce+ Hive(计算+存储型框架:sql--…

一.HDFS的客户端种类 1.网页形式  =>用于测试 网址为你的namenode节点的ip+50070的端口号,如: 192.168.50.128:50070 2.命令行形式 =>用于测试 3.企业级API 二.HDFS客户端的命令行操作 注释:/hdfs为HDFS上的目录 /root/linux为本地集群路径 1.查看帮助 hdfs dfs -help 2.查看目录下的信息 hdfs dfs -ls / hdfs dfs -ls -R / (查看根目录下所有文件和目录) 3.上传文件到HD…

git常用命令行操作: 点击 git bash 进入到命令行: git clone https://github.com/wlz1244/qingoo.git   //下载一个master分支代码 git branch wlz  //新建wlz分支 git checkout wlz  //切换到wlz分支 git pull origin dev //将远程dev分支更新到本地wlz分支 ··············写代码 git add . git commit -m "XXXXX" …

ZooKeeper常用命令行操作 通过./zkCli.sh 打开zk的客户端进入命令行后台 ls/ls2 列出当前节点下的子节点 ls2还会列出当前节点的状态 [zk: localhost:2181(CONNECTED) 5] ls2 / [cluster, controller_epoch, brokers, zookeeper, admin, isr_change_notification, consumers, log_dir_event_notification, latest_prod…