国产一区二区精品-国产一区二区精品久-国产一区二区精品久久-国产一区二区精品久久91-免费毛片播放-免费毛片基地

千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機(jī)構(gòu)

手機(jī)站
千鋒教育

千鋒學(xué)習(xí)站 | 隨時(shí)隨地免費(fèi)學(xué)

千鋒教育

掃一掃進(jìn)入千鋒手機(jī)站

領(lǐng)取全套視頻
千鋒教育

關(guān)注千鋒學(xué)習(xí)站小程序
隨時(shí)隨地免費(fèi)學(xué)習(xí)課程

當(dāng)前位置:首頁(yè)  >  技術(shù)干貨  > 大數(shù)據(jù)面試題:經(jīng)典面試題答疑(十)

大數(shù)據(jù)面試題:經(jīng)典面試題答疑(十)

來(lái)源:千鋒教育
發(fā)布人:syq
時(shí)間: 2022-06-09 10:41:00 1654742460

  1.延遲數(shù)據(jù)(allowedLateness)

  答案:延長(zhǎng)窗口銷(xiāo)毀

  窗口watermark和allowedLateness之后依然遲到的流數(shù)據(jù),也是通過(guò).sideOutputLateData(outputTag)和result.getSideOutput(outputTag)的側(cè)輸出流方式輸出的,拿到這一部分?jǐn)?shù)據(jù)后用戶可以自己處理。

wps4nPq4V

  2.什么是barrier不對(duì)齊?

  答案:當(dāng)還有其他輸入流的barrier還沒(méi)有到達(dá)時(shí),會(huì)把已到達(dá)的barrier之后的數(shù)據(jù)1、2、3擱置在緩沖區(qū),等待其他流的barrier到達(dá)后才能處理。

  barrier不對(duì)齊就是指當(dāng)還有其他流的barrier還沒(méi)到達(dá)時(shí),為了不影響性能,也不用理會(huì),直接處理barrier之后的數(shù)據(jù)。等到所有流的barrier的都到達(dá)后,就可以對(duì)該Operator做CheckPoint了。

  3.為什么要進(jìn)行barrier對(duì)齊?不對(duì)齊到底行不行?

  答案:Exactly Once時(shí)必須barrier對(duì)齊,如果barrier不對(duì)齊就變成了At Least Once;

  CheckPoint的目的就是為了保存快照,如果不對(duì)齊,那么在第n次快照之前,已經(jīng)處理了一些n快照之后對(duì)應(yīng)的offset之后的數(shù)據(jù),當(dāng)程序從n次恢復(fù)任務(wù)時(shí),n次快照對(duì)應(yīng)的offset之后的數(shù)據(jù)還會(huì)被處理一次,所以就出現(xiàn)了重復(fù)消費(fèi)。如果聽(tīng)不懂沒(méi)關(guān)系,后面有案例讓您懂。

  4.相關(guān)參數(shù)配置

  答案:

wpsALVdBd

  5.Flink是如何保證Exactly-once語(yǔ)義的?

  答案:

  1)事務(wù)寫(xiě)(有延遲):兩階段提交(Two-Phase-Commit,2PC),預(yù)寫(xiě)日志(Write-Ahead-Log,WAL)

  兩階段提交:如果外部系統(tǒng)自身就支持事務(wù)(比如Kafka),可以使用2PC方式,提供百分百端到端的Exactly-Once。

  WAL:WAL方式通用性更強(qiáng),適合幾乎所有外部系統(tǒng),但也不能提供百分百端到端的Exactly-Once;

  2)冪等性

  多次寫(xiě)入相同數(shù)據(jù),結(jié)果是一致的的(redis,hbase等)

  更多關(guān)于大數(shù)據(jù)培訓(xùn)的問(wèn)題,歡迎咨詢千鋒教育在線名師,如果想要了解我們的師資、課程、項(xiàng)目實(shí)操的話可以點(diǎn)擊咨詢課程顧問(wèn),獲取試聽(tīng)資格來(lái)試聽(tīng)我們的課程,在線零距離接觸千鋒教育大咖名師,讓你輕松從入門(mén)到精通。

tags:
聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
10年以上業(yè)內(nèi)強(qiáng)師集結(jié),手把手帶你蛻變精英
請(qǐng)您保持通訊暢通,專屬學(xué)習(xí)老師24小時(shí)內(nèi)將與您1V1溝通
免費(fèi)領(lǐng)取
今日已有369人領(lǐng)取成功
劉同學(xué) 138****2860 剛剛成功領(lǐng)取
王同學(xué) 131****2015 剛剛成功領(lǐng)取
張同學(xué) 133****4652 剛剛成功領(lǐng)取
李同學(xué) 135****8607 剛剛成功領(lǐng)取
楊同學(xué) 132****5667 剛剛成功領(lǐng)取
岳同學(xué) 134****6652 剛剛成功領(lǐng)取
梁同學(xué) 157****2950 剛剛成功領(lǐng)取
劉同學(xué) 189****1015 剛剛成功領(lǐng)取
張同學(xué) 155****4678 剛剛成功領(lǐng)取
鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
董同學(xué) 138****2867 剛剛成功領(lǐng)取
周同學(xué) 136****3602 剛剛成功領(lǐng)取
相關(guān)推薦HOT
藍(lán)v抖音小店怎么開(kāi)通店鋪

藍(lán)v抖音小店是一個(gè)非常熱門(mén)的電商平臺(tái),它可以讓賣(mài)家在抖音上開(kāi)設(shè)自己的店鋪,從而出售自己的商品。隨著抖音的不斷發(fā)展壯大,越來(lái)越多的賣(mài)家希...詳情>>

2023-10-08 14:51:53
抖音小店怎么更改類(lèi)目名稱

抖音小店是現(xiàn)在非常火熱的一種網(wǎng)店形態(tài),許多小生意也從中獲得了收益。但是隨著經(jīng)營(yíng)時(shí)間的增長(zhǎng),小店也需要對(duì)自己的類(lèi)目名稱進(jìn)行更改,因?yàn)檫@可...詳情>>

2023-10-08 14:46:50
抖音小店怎么合作賣(mài)貨

抖音小店作為一種新型的電商形式,近年來(lái)在國(guó)內(nèi)市場(chǎng)上逐漸火熱起來(lái),成為了許多年輕人賺取收入的途徑之一。因?yàn)槎兑糇鳛楫?dāng)前最流行的短視頻平臺(tái)...詳情>>

2023-10-08 14:35:49
抖音小店運(yùn)營(yíng)和天貓區(qū)別是什么呢

隨著社交媒體的廣泛應(yīng)用,抖音小店開(kāi)始走進(jìn)人們的生活,成為越來(lái)越多人的購(gòu)物選擇之一。而天貓作為國(guó)內(nèi)最具影響力的電商平臺(tái)之一,是許多電商從...詳情>>

2023-10-08 14:23:10
抖音小店在哪個(gè)界面進(jìn)入店鋪?lái)?yè)面

抖音小店,是指在抖音平臺(tái)上開(kāi)設(shè)的個(gè)人或企業(yè)店鋪。隨著抖音用戶數(shù)的不斷增加,抖音小店越來(lái)越受到用戶的歡迎和喜愛(ài)。但是,如何進(jìn)入抖音小店的...詳情>>

2023-10-08 14:21:20
快速通道