关于spark踩坑之sc特殊性
最近在搞spark,在封装scala和python的sdk时,发现一些很玄妙的事情:
以下是所需封装的python模块文件basejob.py,直接定义全局变量sc,在被import到别的程序中会无法使用这个全局变量sc,经验证需要在函数里定义并把它传递过去才可以。
相关推荐
Johnson0 2020-07-28
Hhanwen 2020-07-26
zhixingheyitian 2020-07-19
yanqianglifei 2020-07-07
Hhanwen 2020-07-05
Hhanwen 2020-06-25
rongwenbin 2020-06-15
sxyhetao 2020-06-12
hovermenu 2020-06-10
Oeljeklaus 2020-06-10
zhixingheyitian 2020-06-08
Johnson0 2020-06-08
zhixingheyitian 2020-06-01
xclxcl 2020-05-31
Hhanwen 2020-05-29
zhixingheyitian 2020-05-29
Oeljeklaus 2020-05-29