#Kafka

kafka集群搭建

一、下载kafka包   然后解压: tar-xvfkafka_2.12-2.1.0.tgz 可以改下文件夹的名称: mvkafka_2.12-2.1.0kafka 然后编辑配置文件: #LicensedtotheApacheSoftwar...
代码星球 ·2020-04-16

java kafka 生产者消费者demo

一、修改kafka  server.porperties的ip是你本机的iplisteners=PLAINTEXT://192.168.111.130:9092 二、生产者的例子importorg.apache.kafka.clients.producer.*;importjava.uti...

kafka可视化工具kafka tools

 一、下载下载地址选择windows傻瓜式安装,选择安装路径,直接下一步就可以了 二、使用 点击,运行 linux开启9092(broker)端口和2181(zookeeper)然后填写后,确定即可 以下表示成功。...
代码星球 ·2020-04-16

kafka的安装和使用

一、下载kafkakafka下载地址 二、解压启动tar-zxvfkafka_2.11-2.1.1.tgz-C解压目录 三、kafka依赖于zookeeper,现在的高版本自带zookeeper 启动zookeeper:./bin/zookeeper-server-start.sh./co...
代码星球 ·2020-04-16

Kafka安装及开启SASL_PLAINTEXT认证(用户名和密码认证)

前些日子要封装一个kafka的客户端驱动,配置了下kafka环境,发现配置复杂度完爆rabbitmq很多倍啊,而且发布订阅模式使用起来也很麻烦,可能就胜在分布式了吧。kafka需要java环境,自行安装javasdk1.8+.http://kafka.apache.org/downloads官方加载安装包,当前为kaf...

Kafka安装及部署

阅读目录一、环境配置二、操作过程Kafka介绍回到顶部操作系统:Cent OS 7Kafka版本:0.9.0.0Kafka官网下载:请点击JDK版本:1.7.0_51SSHSecureShell版本:XShell5回到顶部1、下载Kafka并解压下载:curl-L-Ohttp://mirrors.c...
代码星球 ·2020-04-12

Kafka原理详解

Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/...
代码星球 ·2020-04-08

kafka配置参数详解

BrokerConfigsPropertyDefaultDescriptionbroker.id 每个broker都可以用一个唯一的非负整数id进行标识;这个id可以作为broker的“名字”,并且它的存在使得broker无须混淆consumers就可以迁移到不同的host/port上...
代码星球 ·2020-04-08

kafka官方的kafka-server-start.sh不能关闭kafka进程解决办法

vikafka-server-stop.sh 把PIDS=$(psax|grep-i'kafka.Kafka'|grepjava|grep-vgrep|awk'{print$1}')这行代码修改为PIDS=$(jps-lm|grep-i'kafka.Kafka'|awk'{print$1}')...

go中简单使用kafka

1.安装jdk下载地址:https://www.oracle.com/technetwork/java/javase/downloads/jre8-downloads-2133155.html下载需要注册oracle添加环境变量JAVA_HOME=C:ProgramFilesJavajre1.8.0_2112.安装Zo...
代码星球 ·2020-04-07

kafka集群部署

前提:kafka集群依赖于zk集群,没有zk集群环境的请先参考http://www.cnblogs.com/yjmyzz/p/4587663.html .(注:kafka完整的下载包里,也自带了zk,修改kafka/config/zookeeper.properties,并设置好myid文件,kafka/bi...
代码星球 ·2020-04-06

spring集成kafka

一、添加依赖项compile'org.springframework.kafka:spring-kafka:1.2.2.RELEASE' 二、发消息(生产者)2.1xml配置1<?xmlversion="1.0"encoding="UTF-8"?>2<beansxmlns="http://w...
代码星球 ·2020-04-06

kafka-python的gevent模式和kafka的兼容性

使用gevent会杀死kafka的consumer线程;据查:kafka-python对gevent的支持不是太好,可以使用pykafka;但是可以kafka-python可以结合eventlet使用https://www.zhihu.com/question/31809734...

python3.7新增关键字:async、await;带来和kafka-python==1.4.2的兼容性问题

python3.7新增关键字:async、await;kafka-python==1.4.2用到了关键字async,由此带来兼容性问题解决方案:升级kafka-python==1.4.4使用python3.6或以下版本  结论:尽量使用python比较稳定的版本,不要太新,因为很多插件还来不及适配;...

kafka的安装和使用;kafka常用操作命令

kafka:基于发布/订阅的分布式消息系统、数据管道;最初用来记录活动数据--包括页面访问量(PageView)、被查看内容方面的信息以及搜索情况等内容和运营数据--服务器的性能数据(CPU、IO使用率、请求时间、服务日志等等数据)。Kafka是一个分布式流数据系统,使用Zookeeper进行集群的管理。kafka自己...
首页上一页...89101112...下一页尾页