为了账号安全,请及时绑定邮箱和手机立即绑定

Spark从零开始

Terby JAVA开发工程师
难度初级
时长 2小时18分
学习人数
综合评分9.80
56人评价 查看评价
9.8 内容实用
9.7 简洁易懂
9.9 逻辑清晰

最新回答 / KeithTt
差不多是这样,但是可以有多个master,以及任务是调度到worker节点,资源不是完全池化的

最新回答 / dh1211
自己回答一下,后来解决了,是因为版本的问题

最新回答 / 慕标1442511
hadoop也可以进行计算,它是通过mapreduce计算引擎来计算的。它们的区别是hadoop的mapreduce框架的九三是基于磁盘的,而spark的计算是基于内存的。这也是为什么spark计算比hadoop更快的原因。

最新回答 / AnananananD
ssh是个网络协议,用于远程控制。配置ssh免密防止启动集群的时候每次都要输入密码

+ 我来回答 回答最高可+2积分

最新回答 / 懂渊
没发现,只能看其他实战课程了

最赞回答 / 哎呀阿坨
老师讲的那个500G文件分成5个文件是建立在文件在hdfs的基础上的,使用hdfs的文件系统路径,一次性拿文件全部内容

最新回答 / 慕妹9162326
sc is short for sparkContext stand for sparkContext

最新回答 / Coin_0003
本地和hdfs都可以,视频中示例写的是本地相对路径

最新回答 / 歪脖子的托雷斯
如果安装有hadoop环境,可以使用spark读取hdfs上的文件<...code...>

最新回答 / 慕的地1117626
使用standalone mode启动spark:命令行输入<...code...>参考https://uohzoaix.github.io/studies//2014/09/13/sparkRunning/
首页上一页123456下一页尾页
课程须知
1、 简单Linux的操作
老师告诉你能学到什么?
1、了解Spark到底是什么 2、了解Spark和Hadoop的区别 3、了解Spark的基础知识和概念 4、掌握Spark RDD的基本操作和特性 5、掌握Spark程序的开发和部署流程

微信扫码,参与3人拼团

意见反馈 帮助中心 APP下载
官方微信
友情提示:

您好,此课程属于迁移课程,您已购买该课程,无需重复购买,感谢您对慕课网的支持!

本次提问将花费2个积分

你的积分不足,无法发表

为什么扣积分?

本次提问将花费2个积分

继续发表请点击 "确定"

为什么扣积分?

举报

0/150
提交
取消