Q-Logic IB0056101-00 G Computer Drive User Manual


 
Page iv IB0056101-00 G
QLogic HCA and InfiniPath
®
Software Install Guide
Version 2.2
S
Hardware Installation for QLE7240, QLE7280, or QLE7140 with PCI
Express Riser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-9
Dual Adapter Installation. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-9
Installation Steps. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-9
Hardware Installation for QHT7140 with HTX Riser . . . . . . . . . . . . . . 4-12
Hardware Installation for QLE7240, QLE7280, and QLE7140 Without a PCI
Express Riser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-15
Hardware Installation for the QHT7140 Without an HTX Riser . . . . . . 4-16
Switch Configuration and Monitoring . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-17
Cabling the Adapter to the InfiniBand Switch. . . . . . . . . . . . . . . . . . . . . . . . 4-17
Completing the Installation. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4-18
5 Software Installation
Cluster Setup . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-1
Types of Nodes in a Cluster Environment . . . . . . . . . . . . . . . . . . . . . . 5-1
Supported Linux Distributions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-2
Setting Up Your Environment . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-2
Downloading and Unpacking the InfiniPath and OpenFabrics Software . . . 5-3
Choosing the Appropriate Download Files . . . . . . . . . . . . . . . . . . . . . 5-3
Unpacking the InfiniPath tar File . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-4
Check for Missing Files or RPMs . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-5
Installing the InfiniPath and OpenFabrics RPMs . . . . . . . . . . . . . . . . . . . . . 5-6
Choosing the RPMs to Install . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-7
Using rpm to Install InfiniPath and OpenFabrics. . . . . . . . . . . . . . . . . 5-8
Installed Layout . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-9
Starting the InfiniPath Service . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-10
InfiniPath and OpenFabrics Driver Overview . . . . . . . . . . . . . . . . . . . . . . . . 5-11
Configuring the InfiniPath Drivers. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-11
Configuring the ib_ipath Driver . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-12
Configuring the ipath_ether Network Interface . . . . . . . . . . . . . . . 5-12
ipath_ether Configuration on Red Hat . . . . . . . . . . . . . . . . . 5-12
ipath_ether Configuration on SLES . . . . . . . . . . . . . . . . . . . 5-14
OpenFabrics Drivers and Services Configuration and Startup. . . . . . . . . . . 5-16
Configuring the IPoIB Network Interface . . . . . . . . . . . . . . . . . . . . . . . 5-17
Configuring and Administering the VNIC Interface . . . . . . . . . . . . . . . 5-18
OpenSM . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-23
SRP . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-24
Using OFED SRP . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-24
MPI over uDAPL . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5-26
Other Configuration: Changing the MTU Size . . . . . . . . . . . . . . . . . . . . . . . 5-26