已解决430363个问题，去搜搜看，总会有你想问的

DataFrame连接优化-广播哈希连接

首页猿问 DataFrame连接优化-广播哈希连接

源码

守候你守候我 2019-11-13 14:22:24

我正在尝试有效地连接两个DataFrame，其中一个较大，而第二个较小。有办法避免所有这些改组吗？我无法设置autoBroadCastJoinThreshold，因为它仅支持Integers-并且我要广播的表略大于整数字节。有没有办法强制广播忽略此变量？

查看完整描述

3 回答

呼啦一阵风

TA贡献1802条经验获得超6个赞

您可以通过以下方式暗示要广播的数据帧 left.join(broadcast(right), ...)

反对回复 2019-11-13

关注

0/150

提交

取消