MySql安装位置可通过which mysql或whereis mysql找到 修改mysql配置文件my.ini，通常在/etc下 对于MyISAM，调整系统参数：bulk_insert_buffer_size（至少单个文件大小的2倍以上） 对于InnoDB，调整系统参数：innodb_log_buffer_size（至少单个文件大小的2倍以上，导入完成后可以改回默认的8M，注意不是innodb_buffer_pool_size。） 除主键外，删除其他索引，导入完成后重建索引。 关闭自动提交：autocommit…
//--------------------------------------------------------------------------------------------------------------------- //--------------------------------------------------------------------------------------------------------------------- [collapse title="开窗函…
Kafka安装部署 前置：jdk/zookeeper安装部署，并能正常启动。 #文件解压 tar zxvf kafka_2.11-1.0.0.tgz -C ../servers/ vim /export/servers/kafka_2.11-1.0.0/conf/server.properties #(每个节点不能相同) Broker.id=0 log.dirs=/export/servers/kafka_2.11-1.0.0/logs/ zookeeper.connect=node01:2181,node02:…
Kafka知识点总结 Kafka生态系统四大角色，生产者(Producer)、kafka集群(Broker)、消费者(Consumer)、zookeeper 每个消费者都必须属于一个消费组，一个组内的消费者可以多个。 一个Topic可以有1到多个多个分区（Partition） 一个分区可以有1到多个segment。 每个segment可以有由一个log和一个index组成。 被复制的分区叫做主副本（Leader）,复制出来的叫做从副本（Follower） 生产者只往主副本写数据，消费者只在主副本拉取数据。 从副本只…
