大数据技术
单机上部署kafka3.5,并配置sasl认证
概述今天我要跟大家分享一下如何在单机上部署kafka3.5,并配置sasl认证(plaintext模式)。kafka是一个分布式的消息队列,可以用来处理大量的数据流。sasl是一种安全认证机制,可以保证kafka的通信安全。下面我会分几个步骤来介绍这个过程。...
Kafka的监听地址配置
本文使用版本:Kafka 3.6.0有时我们会碰到网络是通畅的,但却连不上Kafka,特别是在多网卡环境或者云环境上很容易出现。这个其实和Kafka的监听配置有关系。本文介绍监听相关的配置。目前监听相关的参数主要有下面几个:...
KAFAK 配置内外网分流,实现同时支持内网,外网访问kafka
这里的内网和外网并不必须是是我们通常说的公司内部网络和公网,只要是两块网卡都可以,不管是这两块网卡是公网、内网、甚至是k8s的虚拟网络两个网段的主要目的是实现分流,一个负责节点间通信,一个负责对外收发消息...
clickhouse修改数据存储目录
clickhouse默认数据目录是: /var/lib/clickhouse。修改方案:先停止数据库,然后转移该目录到指定位置,最后软连接回原地址并启动;即无需修改config.xml实现对数据目录的修改。1、停止数据库...
clickhouse通过jdbc实现批量数据导入代码示例
通过mybatis也可以实现批量写入clickhouse,但是效率太低,每秒大概只能写入300条数据,对于动辄上千万的数据或者更多数据,效率就太低了。而采用jdbc驱动的方式进行批量写入,每秒大约写入数据量达到10000条,效率得到大幅度的提升,只是这...