为了账号安全,请及时绑定邮箱和手机立即绑定

如何对数据集 spark 中的某些列进行笛卡尔和其他列求和?

如何对数据集 spark 中的某些列进行笛卡尔和其他列求和?

RISEBY 2023-02-23 11:17:51
我有一个使用 java 的数据集:+---------+-------------------+------+|country  |      isNew        |   req|+---------+-------------------+------+|       vn|               true|    10||       vn|              false|     3||       mm|               true|     4||       mm|              fasle|     1|+---------+-------------------+------+我想要笛卡尔列 country 和 isNew with all and sum req。结果看起来像:+---------+-------------------+------+|country  |      isNew        |   req|+---------+-------------------+------+|      all|                all|    18||      all|               true|    14||      all|              false|     4||       vn|                all|    13||       mm|                all|     5||       vn|               true|    10||       vn|              false|     3||       mm|               true|     4||       mm|              fasle|     1|+---------+-------------------+------+请帮我解决这个问题。感谢大家的帮助。
查看完整描述

1 回答

?
慕后森

TA贡献1802条经验 获得超5个赞

df.cube("country", "isNew")
  .agg(sum("req") as "req")
  .na.fill("all")


查看完整回答
反对 回复 2023-02-23
  • 1 回答
  • 0 关注
  • 66 浏览

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信