1、基本信息
1 )构成生产者经纪人的消费者zk 2) kafka设置多少台=2 * (生产者峰值生产率*拷贝/100 )1=3台3 )压力测量：生产者峰值生产率消费者峰值消耗率4 )拷贝：默认1拷贝=()生产高可靠性缺点、低效率5 ) kafka速率100万日活任何人每天100日志每天多少日志=100万* 100日志=1亿件1亿件/(3600*24 )=1150件/s 1m/s哪个时间段的数据峰值7-12 达到s 6)数据保留的默认值为多少=)每天6小时7 )保留了多少磁盘空间(1亿个* 1k=100g 100g * 2)拷贝) 3天/0.7=1t8 )监控kafka manager (滴滴jdk11 )吗kafka eagle开源免费本公司开发的仰视大牌9 )分区可以增强并发性，期望吞吐量为t 100m/s s分区数=t/min(TP，tc )=100/20=5个分区10 )分区分配策略粘性分区range 10分区3个消费线程01 )2) 3 以散列方式分解所有数据，执行轮询11 ) ISR解决了读取器对谁拥有老板的问题的旧版本、延迟时间、延迟条数新版本、延迟时间12
kafka channel无法接收数据，日志备份3，丢失30天
ack配置0生产者发送的数据无关，高效、可靠性差的1生产者发送的数据Leader响应，效率一般、可靠性一般-1生产者发送的数据Leader follower联合响应，效率差、可靠性高0不能使用生产环境； 1 )正常情况下处理普通日志-1)正常情况下涉及金融和金钱。 4、重复了
幂等性事务ack=-1一般为hive dwd spark redis flink 5，积压
增加分区的原始分区=(5个分区消费者CPU ) 1个)必须集中增加，以使消费者能够按批次提取的数据量增加1000 ) 2000-3000 ) 6并进行优化
单个信息的最大处理量： 1m - 5m内存： 1G - 5G拷贝数1个更改，多个数据剩下7天更改，3天的网络通信延迟参数变大，防止频繁拷贝7、复杂拷贝
1 ) Kafka高效读写数据)1)自己是集群，可以设置分区)2)可以依次读写)3)零拷贝技术2 )转发过来的2m日志会出现什么问题