Akumulatori ir mainīgie, kas tiek “pievienoti” tikai ar asociatīvu darbību, un tāpēc tos var efektīvi atbalstīt paralēli. Tos var izmantot lai ieviestu skaitītājus (kā MapReduce) vai summas. Spark sākotnēji atbalsta ciparu veidu akumulatorus, un programmētāji var pievienot atbalstu jauniem veidiem.
Kāpēc mēs izmantojam akumulatoru?
Hidrauliskie akumulatori tiek izmantoti dažādās nozarēs, lai uzglabātu enerģiju; uzturēt spiedienu; slāpēt vibrācijas, pulsācijas un triecienus; un daudz vairāk. Enerģijas uzglabāšana - akumulatori var pieņemt, uzglabāt un atbrīvot enerģiju spiediena šķidruma veidā, lai uzlabotu hidrauliskās sistēmas efektivitāti.
Kāda ir atšķirība starp apraidi un akumulatoru programmā Spark?
Galvenā atšķirība starp apraides mainīgo un akumulatoru ir tas, lai gan apraides mainīgais ir tikai lasāms, akumulatoru var pievienot. … Katrs darbinieka mezgls var piekļūt tikai savai vietējai akumulatora vērtībai un pievienot tai, un tikai draivera programma var piekļūt globālajai vērtībai.
Kā darbojas Spark akumulators?
Akumulatori ir mainīgie, kas tiek lietoti informācijas apkopošanai starp izpildītājiem. Piemēram, šī informācija var attiekties uz datiem vai API diagnostiku, piemēram, cik ierakstu ir bojāti vai cik reizes tika izsaukta konkrēta bibliotēkas API.
Kāpēc darbiniekam nevajadzētu izmantot Spark akumulācijas mainīgo transformācijas darbībām?
Akumulators dos nepareizu izvadi. Ja uzdevums darbojas lēni, Spark var palaist spekulatīvu šī uzdevuma kopiju citā mezglā. Spriedums: nav apstrādāts. Akumulators dos nepareizu izvadi.
