为了账号安全,请及时绑定邮箱和手机立即绑定

单节点集群中的 h2o 是进行并行处理还是仅在多节点集群中进行并行处理?

单节点集群中的 h2o 是进行并行处理还是仅在多节点集群中进行并行处理?

明月笑刀无情 2021-12-22 18:57:41
我们在 AWS 中将 h2o 作为单节点集群运行:R is connected to the H2O cluster:     H2O cluster uptime:         5 seconds 217 milliseconds     H2O cluster timezone:       Etc/UTC     H2O data parsing timezone:  UTC     H2O cluster version:        3.17.0.4153     H2O cluster version age:    10 months and 4 days !!!     H2O cluster name:           h2o-8ba55ebb-7d49-41bd-b4e2-d7be45b5f53e     H2O cluster total nodes:    1     H2O cluster total memory:   22.20 GB     H2O cluster total cores:    8     H2O cluster allowed cores:  8     H2O cluster healthy:        TRUE     H2O Connection ip:          localhost     H2O Connection port:        54321     H2O Connection proxy:       NA     H2O Internal Security:      FALSE     H2O API Extensions:         XGBoost, Algos, AutoML, Core V3, Core V4     R Version:                  R version 3.4.3 (2017-11-30) 并使用 nthreads -1 从 java 启动 h2o:java -ea -Xmx25g -jar /path/to/h2o.jar -name unique-cloud-name      -ip localhost -ice_root /tmp/h2o-tmp -nthreads -1我们想知道 h2o 是否在单节点集群中进行并行处理/使用所有可用和允许的内核。当我们在命令行中执行 top -H 时,我们确实看到了 8 个活动的 java 进程,并想知道它们是否来自 h2o 并帮助生成我们的模型。
查看完整描述

1 回答

?
拉莫斯之舞

TA贡献1820条经验 获得超10个赞

是的,H2O 将使用单个节点上的所有内核来训练一个模型。

nthreads 允许您显式设置控制每个进程的并行量的线程池大小。


查看完整回答
反对 回复 2021-12-22
  • 1 回答
  • 0 关注
  • 152 浏览

添加回答

举报

0/150
提交
取消
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号