kafka connect如何讀取另一台kafka裡面的資料?

時間 2021-07-05 10:03:57

1樓:kanppa

你這個情況其實不一定需要用到kafka connect1.目前有成熟的工具叫kafka mirrormaker2.可以自己實現kafka connect的介面,可以參考https:

//docs.confluent.io/current/connect/devguide.html

2樓:郭俊 Jason

問答需要明確一下

是要問:

Kafka Connect是如何讀取Kafka的資料的?Kafka Connect實際使用Kafka Consumer去讀資料

如何使用Kafka Connect讀取Kafka的資料?Kafka Connect可看作是Kafka與外部系統資料互動或遷移的中介軟體。所以要看你需要把資料讀出來放哪兒。

如果是從Kafka讀出來放到HDFS,可直接使用 Kafka的HDFS connect即可

多個Kafka集群間遷移資料?這種情況,不需要使用Kafka Connect,直接使用Kafka Mirror maker更合適,它專門用於在Kafka集群間遷移資料

如何讀古詩?

青廬 入門前多看點名家評注本,入門後多看詩人別集點校本,輔以詩話理論,再自行感悟。千萬別去買什麼 古詩詞大全 之類的東西,那種算是大雜燴,學生應考或提公升閱讀量用的,沒有什麼價值 兮揚 詩歌這種載體在內容上唯一區別於其他體裁的特點就是四個字 傳情達意。或者如孔老夫子說的 詩言志。所以,看一首詩好壞。...

文科該如何讀?

名字不會起 文科就是死記硬背的特別多,相對比理科要辛苦的多,但只要你肯背肯記就能更快提公升分數,要總結出重點,濾清思路,做好筆記,每年國家的大事都會是考點!祝你成功! 我永遠喜歡鬼切 文科不像理科那樣一節沒學會,以後節節都會廢。文科更注重對是點滴的積累。學習文科就要學會背書。但不能死記硬背,需要靈活...

如何評價《讀庫》?

特別推薦這個非虛構類的雜誌,每期都能看到一些特別感興趣的話題,文風上比 讀書 活潑些,選題上比 三聯生活週刊 深刻些 其實型別不同不太可比 Kk的可樂 簡潔純粹充盈精細靈便 兩年前認識的 讀庫 不知道為什麼,就很喜歡。外觀簡潔,他們的理念是,把書做得像書。小小一本,剛好拿在手裡,非常好翻閱,書封只有...