LinuxANSYSFluent计算集群配置实录

因为实验室的计算量逐年上升，以前计算的很多是二维轴对称的模型，现在很多都需要建立三维模型，并且网格数量是越来越多，所以最近实验室安装了一套计算集群，主要是用来做流体计算的。因为之前的Linux基础不是很扎实，只会一些基本的命令操作，例如：ls、gcc什么的（后悔当初没有去考一个RHCE），因此从安装到调试到解决完所有的问题花费了一个多星期的时间，中间遇到了很多的问题，好在都一一解决掉了。写这篇文章就是想要将配置的过程记录下来，方便以后自己调试，另一面也希望对有类似需求的童鞋有所帮助。可能有的童鞋就会有疑惑了，为什么不让负责安装设备的公司给调试呢？是的，其实这些事情本来就应该是他们做的，但是现实是往往这些公司的工程人员可能对Linux的了解很多操作也很熟练却对ANSYSFluent知道的不多，他们把软件装上去之后有很多问题他们是调试不出来的，比如说UDF在多个结点之间的调用问题等等。另外，如果自己不弄清楚了以后再找这些人过来调试的时候那是要收费的，所以我建议有类似需求的童鞋还是最好能把整个系统搞明白，这样才不会受制于人。

一、配置选择

说到配置，这里有几点需要注意一下。首先，现在限制大型并行运算的主要瓶颈就在于节点之间的相互通信，尤其是对于以有限单元法为基础的CFD类计算，并行计算时会将网格分成很多块放在不同的计算节点上，因此在计算时每个迭代步这些节点之间就要进行大量的数据交换，尤其是选用隐式格式和耦合算法的时候。所以节点之间的数据通信就显得尤为重要，现行比较有效的解决方案就是Infiniband。其次，建议最好至少在一个节点上安装一块性能强劲的独立显卡，并将此节点作为主节点。虽然没有独立显卡并不会影响计算速度，但是对操作的流畅性有很大的影响，之前选择方案时没有考虑到这一点结果导致机器安装到位后，打开软件以及读入数据和显示模型都十分缓慢。

1.硬件配置

节点数量：4

节点类型：2U

CPU型号：IntelXeonE5-

内存：ECCDDRGB/节点

硬盘：1TB/节点

节点间通讯方式：Infiniband交换机40GB/s型号：QLogic

节点网卡：QLogicQLE

2.软件配置

操作系统：CentOS6.2

计算软件：ANSYS13.0

说到操作系统，目前主流的高性能计算集群选用的都是Linux操作系统，主要的原因是免费、高可靠性、高定制性、占用资料少。但是因为Linux系统的内核一直在不断地升级，所以衍生出了很多版本，也导致了一些兼容性问题。前面提到开始的时候在方案里没有选用独立显卡，导致软件显示卡顿，所以后来为了解决这个问题，我将一台配置有独立显卡的PC机安装上Infiniband网卡和Linux系统接入了集群中。刚开始的时候我从CentOS的

转载请注明:http://www.aideyishus.com/lkcf/7596.html