国产高清吹潮免费视频,老熟女@tubeumtv,粉嫩av一区二区三区免费观看,亚洲国产成人精品青青草原

二維碼
企資網(wǎng)

掃一掃關(guān)注

當(dāng)前位置: 首頁 » 企資快報 » 科普知識 » 正文

消費(fèi)者分區(qū)分配策略_Stricky_Range

放大字體  縮小字體 發(fā)布日期:2023-03-17 19:54:32    作者:葉昊天    瀏覽次數(shù):58
導(dǎo)讀

Range范圍分配策略是Kafka默認(rèn)的分配策略,它可以確保每個消費(fèi)者消費(fèi)的分區(qū)數(shù)量是均衡的。注意:Rangle范圍分配策略是針對每個Topic的。配置配置消費(fèi)者的partition.assignment.strategy為org.apache.kafka.clients.c

Range范圍分配策略是Kafka默認(rèn)的分配策略,它可以確保每個消費(fèi)者消費(fèi)的分區(qū)數(shù)量是均衡的。注意:Rangle范圍分配策略是針對每個Topic的。

配置

配置消費(fèi)者的partition.assignment.strategy為org.apache.kafka.clients.consumer.RangeAssignor。

算法公式

n = 分區(qū)數(shù)量 / 消費(fèi)者數(shù)量
m = 分區(qū)數(shù)量 % 消費(fèi)者數(shù)量
前m個消費(fèi)者消費(fèi)n+1個
剩余消費(fèi)者消費(fèi)n個

RoundRobin輪詢策略

RoundRobinAssignor輪詢策略是將消費(fèi)組內(nèi)所有消費(fèi)者以及消費(fèi)者所訂閱的所有topic的partition按照字典序排序(topic和分區(qū)的hashcode進(jìn)行排序),然后通過輪詢方式逐個將分區(qū)以此分配給每個消費(fèi)者。

配置

配置消費(fèi)者的partition.assignment.strategy為org.apache.kafka.clients.consumer.RoundRobinAssignor。

Stricky粘性分配策略

從Kafka 0.11.x開始,引入此類分配策略。主要目的:

1. 分區(qū)分配盡可能均勻

2. 在發(fā)生rebalance的時候,分區(qū)的分配盡可能與上一次分配保持相同
沒有發(fā)生rebalance時,Striky粘性分配策略和RoundRobin分配策略類似。

上面如果consumer2崩潰了,此時需要進(jìn)行rebalance。如果是Range分配和輪詢分配都會重新進(jìn)行分配,例如:

通過上圖,我們發(fā)現(xiàn),consumer0和consumer1原來消費(fèi)的分區(qū)大多發(fā)生了改變。接下來我們再來看下粘性分配策略。

我們發(fā)現(xiàn),Striky粘性分配策略,保留rebalance之前的分配結(jié)果。這樣,只是將原先consumer2負(fù)責(zé)的兩個分區(qū)再均勻分配給consumer0、consumer1。這樣可以明顯減少系統(tǒng)資源的浪費(fèi),例如:之前consumer0、consumer1之前正在消費(fèi)某幾個分區(qū),但由于rebalance發(fā)生,導(dǎo)致consumer0、consumer1需要重新消費(fèi)之前正在處理的分區(qū),導(dǎo)致不必要的系統(tǒng)開銷。(例如:某個事務(wù)正在進(jìn)行就必須要取消了)

 
(文/葉昊天)
打賞
免責(zé)聲明
本文為葉昊天推薦作品?作者: 葉昊天。歡迎轉(zhuǎn)載,轉(zhuǎn)載請注明原文出處:http://biorelated.com/qzkb/show-112130.html 。本文僅代表作者個人觀點(diǎn),本站未對其內(nèi)容進(jìn)行核實(shí),請讀者僅做參考,如若文中涉及有違公德、觸犯法律的內(nèi)容,一經(jīng)發(fā)現(xiàn),立即刪除,作者需自行承擔(dān)相應(yīng)責(zé)任。涉及到版權(quán)或其他問題,請及時聯(lián)系我們郵件:weilaitui@qq.com。
 

Copyright ? 2016 - 2023 - 企資網(wǎng) 48903.COM All Rights Reserved 粵公網(wǎng)安備 44030702000589號

粵ICP備16078936號

微信

關(guān)注
微信

微信二維碼

WAP二維碼

客服

聯(lián)系
客服

聯(lián)系客服:

在線QQ: 303377504

客服電話: 020-82301567

E_mail郵箱: weilaitui@qq.com

微信公眾號: weishitui

客服001 客服002 客服003

工作時間:

周一至周五: 09:00 - 18:00

反饋

用戶
反饋