CC集群跑模型时Ram使用量应该设置多少？

Question

集群的从机配置不一样，主机128G内存，2台从机都是64G内存。
生产的时候Ram使用量是不超过3台电脑内存总数的2/3？还是最大内存电脑的2/3？还是最小内存电脑的2/3

Answer 1

以下内容由CHATGPT及阿里嘎多学长共同生成、有用望采纳：

---

您想要解决的问题：

您想要解决的问题是如何设置CC集群在运行模型时的RAM使用量。具体来说，您需要确定在集群中，主机和从机内存配置不同时，RAM使用量应该设置为不超过总内存的2/3，还是单台最大或最小内存机器的2/3。

图片内容：

图片中显示的是三维重建的设置界面，包括空间框架、几何约束、参考模型和处理设置等部分。其中，空间参考系统(SRS)是WGS 84 / UTM zone 48N (EPSG: 32648)。兴趣区域的边界框是从文件导入的，具体尺寸为674.9米×621.8米×109.1米。切块模式是自适应切块，目标内存使用量设置为16GB，总共包括19个瓦片，预计作业的RAM使用量为15GB。

问题出现原因：

问题出现的原因是在集群环境中，不同机器的内存配置不同，需要合理分配资源以确保模型运行的效率和稳定性。您需要确定一个合适的RAM使用量，以避免资源浪费或因内存不足导致模型运行失败。

问题解决方案：

最优解决方案是将RAM使用量设置为不超过集群总内存的2/3。这样可以确保有足够的内存用于其他任务，同时避免因内存不足而影响模型的运行。

提供代码：

由于这是一个资源分配问题，而不是代码问题，因此没有具体的代码需要修改。但是，您可以根据以下步骤来调整RAM使用量：

1. 确定集群的总内存：主机128GB + 2 * 64GB = 256GB。
2. 计算2/3的总内存：256GB * 2/3 ≈ 170.67GB。
3. 根据模型的需求和集群的负载情况，将RAM使用量设置在合理范围内，但不超过170.67GB。

代码运行方式：

由于没有具体的代码，所以不需要特定的运行环境。

代码预期运行结果：

预期结果是模型能够在不超过集群内存2/3的情况下稳定运行，同时留有足够的内存空间用于其他任务。

推荐相关链接：

1. CC集群管理
2. 内存管理最佳实践
3. 高性能计算资源分配
4. 集群计算资源优化

请注意，以上链接仅为示例，实际可用的资源可能需要您自行搜索和验证。