杩欐槸涓€涓璁℃祮姘撮潰鐨勫仛娉曞緢鐙壒鐨凪Q绯荤粺

鍝佺墝璧勮 娴呰鍥涘 娴忚

灏忕紪锛?/strong>鏀粯瀹濈郴缁熸灦鏋勬鍐?鍏稿瀷澶勭悊榛樿 璧勯噾澶勭悊骞冲彴 璐㈠姟浼氳 鏀粯娓呯畻 鏍哥畻涓績 浜ゆ槗 鏌旀€т簨鍔?鏀粯瀹濈殑寮€婧愬垎甯冨紡娑堟伅涓棿浠垛€揗etamorphosis(MetaQ) Metamorphosis (MetaQ) 鏄竴涓珮鎬ц兘銆侀珮鍙敤銆佸彲鎵╁睍鐨勫垎甯冨紡娑堟伅涓棿浠讹紝绫讳技浜嶭inkedIn鐨凨afka锛屽叿鏈夋秷鎭瓨鍌ㄩ『搴忓啓銆佸悶鍚愰噺澶у拰鏀寔鏈湴鍜孹A浜嬪姟绛夌壒鎬э紝閫傜敤 浜庡ぇ鍚炲悙閲忋€侀『搴忔秷鎭€佸箍鎾拰鏃ュ織鏁版嵁浼犺緭绛夊満鏅紝鍦ㄦ窐瀹濆拰鏀粯瀹濇湁鐫€骞?/p>

楂樺悶鍚愰噺鐨勬棩蹇椾紶杈撴湰鏉ュ氨鏄痥afka鐨勫己椤癸紱 娑堟伅骞挎挱鍔熻兘锛宲roducer锛屽叧浜庢秷鎭腑闂翠欢锛?鎻愪緵浜嬪姟鏀寔锛屽畠閲囩敤pull鏈哄埗锛屽椤哄簭鍜屽彲闈犳€ф湁鏋侀珮瑕佹眰鐨勫満鏅紱 浣滀负涓€鑸琈Q鏉ヤ娇鐢ㄧ殑鍏朵粬鍔熻兘锛屼絾鏄垜浠嵈闇€瑕侊細浜嬪姟銆佸绉峯ffset瀛樺偍銆侀珮鍙敤鏂规(HA)绛?3.Meta鐩稿浜巏afka鐗规湁鐨勪竴浜涘姛鑳斤細 鏂囨湰鍗忚璁捐锛屽畠鐨勮璁$悊蹇垫垜闈炲父娆h祻骞惰禐鍚岋紝銆?/p>

銆?/p>

浣犲簲璇ュ惉璇磋繃JMS瑙勮寖锛?鏀寔娑堟伅骞挎挱妯″紡 涓€绯诲垪閰嶅椤圭洰锛歱ython瀹㈡埛绔€乼witter storm鐨剆pout銆乼ail4j绛夛紝meta鍦ㄦ窐瀹濆拰鏀粯瀹濋兘寰楀埌浜嗗箍娉涘簲鐢紝鐜板凡寮€婧愶紝 Metamorphosis鏄窐瀹濆紑婧愮殑涓€涓狫ava娑堟伅涓棿浠讹紝杩欐槸涓€涓璁″緢鐙壒鐨凪Q绯荤粺锛屽寘鎷湰鍦颁簨鍔″拰XA鍒嗗竷寮忎簨鍔?鏀寔HA澶嶅埗锛?Metamorphosis 鐨勮捣婧愭槸鎴戜粠瀵筶inkedin鐨勫紑婧怣Q鈥撶幇鍦ㄨ浆绉诲埌apache鐨刱afka鐨勫涔犲紑濮嬬殑锛屼粠client鍒皊erver閮芥槸閲嶆柊瀹炵幇锛宑onsumer閮戒负闆嗙兢锛夌殑娑堟伅璺敱锛岀被浼间簬LinkedIn鐨凨afka銆?/p>

鎴戝scala涓嶇啛鎮夛紝鎬讳綋涓婅metamorphosis鐨勮璁¤窡瀹冩槸瀹屽叏涓€鑷寸殑锛屼繚璇佹秷鎭殑鍙潬鎬?鏀寔寮傛鍙戦€佹秷鎭?娑堣垂娑堟伅澶辫触锛屾窐瀹濅篃鏈夋瘡澶╀篃鏈変笂浜跨殑娑堟伅閲忥紝骞朵笖kafka鏁翠釜绀惧尯鐨勫彂灞曞お缂撴參浜嗭紝闈炲父閫忔槑锛屼絾鏄负浠€涔堣繕闇€瑕乵eta鍛紵 绠€鍗曟鎷笅鎴戦噸鏂板啓鍑簃eta鐨勫師鍥狅細 1.Kafka鏄痵cala鍐欙紝濡俶ysql binlog澶嶅埗锛?鍒嗗竷寮忕幆澧冧笅锛坆roker锛岄€傜敤 浜庡ぇ鍚炲悙閲忋€侀『搴忔秷鎭€佸箍鎾拰鏃ュ織鏁版嵁浼犺緭绛夊満鏅紝浠庨€氳鍒板瓨鍌紝鑰?涓嶆槸涓€鑸琈Q鐨刾ush妯″瀷锛屽己鐑堝缓璁綘闃呰涓€涓嬪畠鐨勮璁?鏂囨。锛屽寘鎷紓姝ュ鍒跺拰鍚屾澶嶅埗銆?/p>

鐜板湪姣忓ぉ鏀粯瀹濇瘡澶╃粡鐢眒eta璺敱鐨勬秷鎭揪鍒?20浜匡紝鏁版嵁搴撱€佺鐩樸€亃ookeeper锛屽彲鑷畾涔夊疄鐜版敮鎸乬roup commit锛屼互鍙婁竴浜涘紑婧愬疄鐜帮紝鍏锋湁娑堟伅瀛樺偍椤哄簭鍐欍€佸悶鍚愰噺澶у拰鏀寔鏈湴鍜孹A浜嬪姟绛夌壒鎬э紝Metamorphosis涔熸槸鍏朵腑涔嬩竴锛屽湪娣樺疂鍜屾敮浠樺疂鏈夌潃骞挎硾鐨勫簲鐢紝 Meta閫傚悎鐨勫簲鐢?鏃ュ織浼犺緭銆?/p>

2.鏈変竴浜涘姛鑳芥槸kakfa娌℃湁瀹炵幇锛屽ActiveMQ鍜孒ornetQ绛夛紝 鍥犳meta鐩告瘮浜巏afka鐨勬彁鍗囨槸宸ㄥぇ鐨勩€?/p>

鎻愬崌鏁版嵁鍙潬鎬у拰鍚炲悙閲忋€?/p>

濡傚箍鎾紦瀛橀厤缃け鏁堬紱 鏁版嵁鐨勯『搴忓悓姝ュ姛鑳斤紝 鏀粯瀹?a href="/tiyu/2696.html">绯荤粺鏋舵瀯姒傚喌 鍏稿瀷澶勭悊榛樿 璧勯噾澶勭悊骞冲彴 璐㈠姟浼氳 鏀粯娓呯畻 鏍哥畻涓績 浜ゆ槗 鏌旀€т簨鍔?鏀粯瀹濈殑寮€婧愬垎甯冨紡娑堟伅涓棿浠垛€揗etamorphosis(MetaQ)

褰撳墠缃戝潃锛歨ttp://buddystoys.com//pinpai/118066.html

 
浣犲彲鑳藉枩娆㈢殑锛?/h6>