为了账号安全,请及时绑定邮箱和手机立即绑定

关于JAVA和SPARK结合的困惑

关于JAVA和SPARK结合的困惑

红颜莎娜 2019-01-18 22:57:03
在下是个初级JAVA,目前接手了一个任务做一个数据加工系统。拿一个连锁超市举例子,这个超市的老板通过我们的系统上传小票文件,然后我们根据文件中每一条小票上的店名,销售人员和商品信息,给这个超市老板出一个报表,比如说店销售额排名,人员销售额排名等等。但是可能文件很大,没办法一次性读到内存里计算,希望借助Spark来实现...在这里有一个困惑,就是如何使用JAVA自动将这个计算任务交给Spark并获取到结果...
查看完整描述

1 回答

?
大话西游666

TA贡献1817条经验 获得超14个赞

把java达成jar包提交到spark上.
把结果输入到hdfs集群上.

查看完整回答
反对 回复 2019-03-01
  • 1 回答
  • 0 关注
  • 374 浏览

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信