blog/BigData-Notes
2
0
Fork 0
Code Issues Pull Requests Packages Projects Releases Wiki Activity

Merge branch 'master' of github.com:heibaiying/BigData-Notes

Browse Source
This commit is contained in:
罗祥 2019-05-18 11:49:58 +08:00
commit ef9f77a656
1 changed files with 10 additions and 9 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

3
notes/Spark累加器与广播变量.md
View File

@ -1,4 +1,5 @@
# Spark 累加器与广播变量 # Spark 累加器与广播变量
<nav> <nav>
<a href="#一简介">一、简介</a><br/> <a href="#一简介">一、简介</a><br/>
<a href="#二累加器">二、累加器</a><br/> <a href="#二累加器">二、累加器</a><br/>
@ -9,7 +10,7 @@
## 一、简介 ## 一、简介
在Spark中，提供了两种类型的共享变量：累加器(accumulator)与广播变量(broadcast variable)。 在Spark中，提供了两种类型的共享变量：累加器(accumulator)与广播变量(broadcast variable)：
+ 累加器：用来对信息进行聚合，主要用于累计计数等场景； + 累加器：用来对信息进行聚合，主要用于累计计数等场景；
+ 广播变量：主要用于在节点间高效分发大对象。 + 广播变量：主要用于在节点间高效分发大对象。