第32课:Kafka原理内幕和集群构建与测试实战 1 kafka原理内幕 2 kafka集群实战
Kafka的重要性不亚于spark streaming的重要性!彻底精通kafka,做到绝对精通kafka。如一些公司使用流处理系统:kafka改造整个IT异构系统!
kafka 1、kafka是分布式的,大规模消息打下坚实的基础,scalable 2、对消息进行持久化,默认情况保存7天(不消费就删掉了)。消费过以后不会删除,可以重复消费。 3、消息中间件的集大成者。抽象强大: 先进先出的消息队列; 发布者和订阅者。
andriod 安卓系统,数据的收集和消费,智能终端! andriod+spark+kafka kafka把一切整合起来了,打破了时间和空间的差异
kafka的存在打破了异构物理系统的差异化:车载系统、andriod、智能终端.........无所谓服务端和终端了
kafka传消息的角度来是实时的、离线的,磁盘系统存储消息,满足各种需要;kafka事务方面不行。
数据放在内存快,还是放到磁盘中放