千锋教育-做有情怀、有良心、有品质的职业教育机构

手机站
千锋教育

千锋学习站 | 随时随地免费学

千锋教育

扫一扫进入千锋手机站

领取全套视频
千锋教育

关注千锋学习站小程序
随时随地免费学习课程

首页 视频教程 培训课程 师资团队 技术干货 常见问题 面试题 职场就业 零基础学大数据 行业资讯
【热点话题】 大数据技术干货 大数据学习教程 大数据学习笔记 大数据面试题 大数据培训问答 大数据培训机构哪些好 大数据职场就业
当前位置:大数据培训  >  大数据技术干货  >  kafka的topic,partition,replica,message的理解

kafka的topic,partition,replica,message的理解

来源:千锋教育
发布人:wjy
时间: 2022-09-20 16:59:00 1663664340

  Topic:Topic可以理解为一个队列,消息根据Topic进行归类。

  Topic也可以理解为一个命名的消息流 partition: partition:一个topic可以分为多个partition,每个partition是一个有序的队;

  在磁盘上以文件夹的形式存在;

kafka的topic,partition,replica,message的理解

  消息最终以文件形式保存在partition文件夹下面,分段存储。

  replica:replica指的是消息的备份,为了保证kafka的高可用(当leader节点挂了之后,kafka依然能提供服务)kafka提供了备份的功能。

  这个备份是针对partition的。

  可以通过default.replication.factor 对replica的数目进行配置,默认值为1,表示不对topic进行备份。

  如果配置为2,表示除了leader节点,对于topic里的每一个partition,都会有一个额外的备份。

  message:实际写入Kafka中并可以被读取的消息记录。

  每个record包含了key、value和timestamp

声明:本站稿件版权均属千锋教育所有,未经许可不得擅自转载。

猜你喜欢LIKE

最新文章NEW

相关推荐HOT

更多>>