IBM p 655 series User manual

pSeries 655
User’s Guide
SA38-0617-03
ERserver


pSeries 655
User’s Guide
SA38-0617-03
ER s e r v e r


Fourth Edition (February 2004)
Before using this information and the product it supports, read the information in “Safety Notices” on page ix,
Appendix A, “Environmental Notices,” on page 123, and Appendix B, “Notices,” on page 125.
A reader’s comment form is provided at the back of this publication. If the form has been removed, address
comments to Information Development, Department H6DS-905-6C006, 11501 Burnet Road, Austin, Texas
78758-3493. To send comments electronically, use this commercial internet address: [email protected]. Any
information that you supply may be used without incurring any obligation to you.
© Copyright International Business Machines Corporation, 2002, 2004 All rights reserved.
Note to U.S. Government Users -- Documentation related to restricted rights -- Use, duplication or disclosure is
subject to restrictions set forth is GSA ADP Schedule Contract with IBM Corp.

Contents
Safety Notices . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .ix
Rack Safety Instructions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .ix
Electrical and Mechanical Safety . . . . . . . . . . . . . . . . . . . . . . . . . . .ix
Laser Safety Information . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xi
Laser Compliance . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xi
Data Integrity and Verification . . . . . . . . . . . . . . . . . . . . . . . . . . . xiii
About This Book . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xv
ISO 9000 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xv
Highlighting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xv
Accessing Information . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xv
References to AIX Operating System . . . . . . . . . . . . . . . . . . . . . . . . .xv
Related Publications . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xv
Trademarks . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . xvi
Chapter 1. Reference Materials . . . . . . . . . . . . . . . . . . . . . . . . . . .1
Documentation Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .3
Chapter 2. Introducing the pSeries 655 . . . . . . . . . . . . . . . . . . . . . . . .7
Processor Subsystem . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8
Partitioned System Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8
Partition Profiles . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9
System Profiles . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9
Types of Partitions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9
System Attention LEDs . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .11
System Attention LED . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .12
Accessing System Log Error Information . . . . . . . . . . . . . . . . . . . . . . .12
PCI Adapters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .12
Resetting the System Attention LED . . . . . . . . . . . . . . . . . . . . . . . .13
Chapter 3. Using the Hardware Management Console for pSeries . . . . . . . . . . . . .15
Hardware Management Console (HMC) Overview and Setup . . . . . . . . . . . . . . . .15
System Power-On Methods . . . . . . . . . . . . . . . . . . . . . . . . . . . . .15
Powering On the Processor Subsystem Using the HMC . . . . . . . . . . . . . . . . . .15
Powering Off the Processor Subsystem Using the HMC . . . . . . . . . . . . . . . . . .15
Graphics Console Support . . . . . . . . . . . . . . . . . . . . . . . . . . . . .16
Understanding the Power-On Self-Test (POST) . . . . . . . . . . . . . . . . . . . . .16
POST Indicators . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .16
POST Keys . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .17
Chapter 4. Using the Service Processor . . . . . . . . . . . . . . . . . . . . . . .19
Service Processor Menus . . . . . . . . . . . . . . . . . . . . . . . . . . . . .19
Accessing the Service Processor Menus . . . . . . . . . . . . . . . . . . . . . . .19
Saving and Restoring Service Processor Settings . . . . . . . . . . . . . . . . . . .19
Menu Inactivity . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .20
General User Menu . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .20
Privileged User Menus . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .22
Main Menu . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .22
Service Processor Setup Menu . . . . . . . . . . . . . . . . . . . . . . . . . .23
Passwords . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .24
System Power Control Menu . . . . . . . . . . . . . . . . . . . . . . . . . . .27
System Information Menu . . . . . . . . . . . . . . . . . . . . . . . . . . . .30
iii

Language Selection Menu . . . . . . . . . . . . . . . . . . . . . . . . . . . .38
Call-In/Call-Out Setup Menu . . . . . . . . . . . . . . . . . . . . . . . . . . .39
Service Processor Parameters in Service Mode (Full System Partition) . . . . . . . . . . . . .39
Service Processor Reboot/Restart Recovery . . . . . . . . . . . . . . . . . . . . . .39
Boot (IPL) Speed . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .39
Failure During Boot Process . . . . . . . . . . . . . . . . . . . . . . . . . . .39
Failure During Normal System Operation . . . . . . . . . . . . . . . . . . . . . . .39
Service Processor Reboot/Restart Policy Controls . . . . . . . . . . . . . . . . . . .40
Updating System Firmware and Microcode . . . . . . . . . . . . . . . . . . . . . . .42
General Information on Processor Subsystem Firmware Updates . . . . . . . . . . . . . .42
Determining the Level of Firmware on the Processor Subsystem . . . . . . . . . . . . . .42
Processor Subsystem Firmware Update Using a Locally Available Image . . . . . . . . . . .43
Updating System Firmware from the AIX Service Aids . . . . . . . . . . . . . . . . . .44
Updating System Firmware from the AIX Command Line . . . . . . . . . . . . . . . . .44
Frame (Power Subsystem) Firmware Update . . . . . . . . . . . . . . . . . . . . .44
Integrated SCSI Controller Microcode Update . . . . . . . . . . . . . . . . . . . . .45
Integrated Ethernet Microcode Update . . . . . . . . . . . . . . . . . . . . . . . .45
Installing Corrective Service on the Frame . . . . . . . . . . . . . . . . . . . . . .45
Reconfiguration Procedure for SNI Adapters . . . . . . . . . . . . . . . . . . . . .46
Configuring and Deconfiguring Processors or Memory . . . . . . . . . . . . . . . . . . .46
Run-Time CPU Deconfiguration (CPU Gard) . . . . . . . . . . . . . . . . . . . . .47
Service Processor System Monitoring - Surveillance . . . . . . . . . . . . . . . . . . .47
System Firmware Surveillance . . . . . . . . . . . . . . . . . . . . . . . . . . .47
Operating System Surveillance . . . . . . . . . . . . . . . . . . . . . . . . . .47
Service Processor Error Logs . . . . . . . . . . . . . . . . . . . . . . . . . . . .48
LCD Progress Indicator Log . . . . . . . . . . . . . . . . . . . . . . . . . . . .49
Resetting the Service Processor . . . . . . . . . . . . . . . . . . . . . . . . . . .50
Service Processor Operational Phases . . . . . . . . . . . . . . . . . . . . . . . .50
Pre-Standby Phase . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .50
Standby Phase . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .50
Bring-Up Phase . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .51
Runtime Phase . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .51
Clearing L3 Gard Records . . . . . . . . . . . . . . . . . . . . . . . . . . . .52
Chapter 5. Using System Management Services . . . . . . . . . . . . . . . . . . . .53
Select Language . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .54
Change Password Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . .54
Set Privileged-Access Password . . . . . . . . . . . . . . . . . . . . . . . . . .54
View Error Log . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .55
Setup Remote IPL (Initial Program Load) . . . . . . . . . . . . . . . . . . . . . . . .55
Change SCSI Settings . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .58
Select Console . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .58
Select Boot Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .58
Select Boot Devices . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .61
Display Current Settings . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .64
Restore Default Settings . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .64
Multiboot Startup . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .64
Exiting System Management Services . . . . . . . . . . . . . . . . . . . . . . . . .64
Chapter 6. Using the Online and Standalone Diagnostics . . . . . . . . . . . . . . . .65
Online and Standalone Diagnostics Operating Considerations . . . . . . . . . . . . . . . .65
Identifying the Terminal Type to the Diagnostics . . . . . . . . . . . . . . . . . . . .65
Undefined Terminal Types . . . . . . . . . . . . . . . . . . . . . . . . . . . .66
Resetting the Terminal . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .66
Running Online Diagnostics . . . . . . . . . . . . . . . . . . . . . . . . . . . .66
Online Diagnostics Modes of Operation . . . . . . . . . . . . . . . . . . . . . . . .66
iv Eserver pSeries 655 User’s Guide

Service Mode . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .66
Concurrent Mode . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .67
Maintenance Mode . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .67
Running Online Diagnostics in Service Mode . . . . . . . . . . . . . . . . . . . . . .68
Running the Online Diagnostics in Concurrent Mode . . . . . . . . . . . . . . . . . . .68
Running the Online Diagnostics in Maintenance Mode . . . . . . . . . . . . . . . . . . .68
Standalone Diagnostic Operation . . . . . . . . . . . . . . . . . . . . . . . . . . .69
Partitioned System Considerations for Standalone Diagnostics . . . . . . . . . . . . . . .69
Running Standalone Diagnostics from a Network Installation Management (NIM) Server . . . . .69
NIM Server Configuration . . . . . . . . . . . . . . . . . . . . . . . . . . . .69
Client Configuration and Booting Standalone Diagnostics from the NIM Server . . . . . . . . .70
Chapter 7. Introducing Tasks and Service Aids . . . . . . . . . . . . . . . . . . . .73
Tasks . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .73
Add Resource to Resource List . . . . . . . . . . . . . . . . . . . . . . . . . . .75
AIX Shell Prompt . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .75
Analyze Adapter Internal Log . . . . . . . . . . . . . . . . . . . . . . . . . . . .75
Backup and Restore Media . . . . . . . . . . . . . . . . . . . . . . . . . . . . .75
Certify Media . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .76
Change Hardware Vital Product Data . . . . . . . . . . . . . . . . . . . . . . . . .77
Configure Dials and LPF Keys . . . . . . . . . . . . . . . . . . . . . . . . . . . .77
Configure ISA Adapter . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .78
Configure Reboot Policy . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .78
Configure Remote Maintenance Policy . . . . . . . . . . . . . . . . . . . . . . . . .79
Configure Ring Indicate Power-On Policy . . . . . . . . . . . . . . . . . . . . . . . .80
Configure Scan Dump Policy . . . . . . . . . . . . . . . . . . . . . . . . . . . .81
Configure Surveillance Policy . . . . . . . . . . . . . . . . . . . . . . . . . . . .81
Create Customized Configuration Diskette . . . . . . . . . . . . . . . . . . . . . . .82
Delete Resource from Resource List . . . . . . . . . . . . . . . . . . . . . . . . .82
Disk Maintenance . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .82
Disk to Disk Copy . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .82
Display/Alter Sector . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .83
Display Configuration and Resource List . . . . . . . . . . . . . . . . . . . . . . . .83
Display Firmware Device Node Information . . . . . . . . . . . . . . . . . . . . . . .83
Display Hardware Error Report . . . . . . . . . . . . . . . . . . . . . . . . . . .83
Display Hardware Errors for Any Resource . . . . . . . . . . . . . . . . . . . . . .83
Display Hardware Errors for PCI-X SCSI RAID Adapters . . . . . . . . . . . . . . . . .84
Display Hardware Errors for PCI-X SCSI Adapters . . . . . . . . . . . . . . . . . . .84
Display Hardware Vital Product Data . . . . . . . . . . . . . . . . . . . . . . . . .84
Display Machine Check Error Log . . . . . . . . . . . . . . . . . . . . . . . . . .84
Display Microcode Level . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .84
Display MultiPath I/O (MPIO) Device Configuration . . . . . . . . . . . . . . . . . . . .84
Display or Change Bootlist . . . . . . . . . . . . . . . . . . . . . . . . . . . . .85
Display or Change Diagnostic Run-Time Options . . . . . . . . . . . . . . . . . . . . .85
Display Previous Diagnostic Results . . . . . . . . . . . . . . . . . . . . . . . . .86
Display Resource Attributes . . . . . . . . . . . . . . . . . . . . . . . . . . . . .87
Display Service Hints . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .87
Display Software Product Data . . . . . . . . . . . . . . . . . . . . . . . . . . .87
Display System Environmental Sensors . . . . . . . . . . . . . . . . . . . . . . . .87
Examples . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .88
Display Test Patterns . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .88
Display USB Devices . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .88
Download Microcode . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .89
Download Microcode to PCI SCSI RAID Adapter . . . . . . . . . . . . . . . . . . . .89
Download Microcode to a PCI-X Dual Channel Adapter . . . . . . . . . . . . . . . . .89
Download Microcode to Disk Drive Attached to a PCI SCSI RAID Adapter . . . . . . . . . .89
Contents v

Download Microcode to a Fiber Channel Adapter . . . . . . . . . . . . . . . . . . . .90
Download Microcode to DVD-RAM Attached to a PCI SCSI Adapter . . . . . . . . . . . . .90
Download Microcode to Disk Attached to PCI SCSI Adapter . . . . . . . . . . . . . . . .90
Download Microcode to Other Devices . . . . . . . . . . . . . . . . . . . . . . .90
Fault Indicators . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .91
Fibre Channel RAID Service Aids . . . . . . . . . . . . . . . . . . . . . . . . . .91
Flash SK-NET FDDI Firmware . . . . . . . . . . . . . . . . . . . . . . . . . . . .92
Format Media . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .92
Format and/or Erase Hard File Attached to a Non-RAID and PCI-X SCSI Adapter . . . . . . . .92
Hardfile Attached to PCI SCSI RAID Adapter . . . . . . . . . . . . . . . . . . . . .93
Optical Media . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .94
Diskette Format . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .94
Gather System Information . . . . . . . . . . . . . . . . . . . . . . . . . . . . .94
Generic Microcode Download . . . . . . . . . . . . . . . . . . . . . . . . . . . .94
Hot-Plug Task . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .94
PCI Hot-Plug Manager . . . . . . . . . . . . . . . . . . . . . . . . . . . . .95
SCSI Hot Swap Manager . . . . . . . . . . . . . . . . . . . . . . . . . . . .96
SCSI and SCSI RAID Hot-Plug Manager . . . . . . . . . . . . . . . . . . . . . . .97
RAID Hot-Plug Devices . . . . . . . . . . . . . . . . . . . . . . . . . . . . .98
Identify Indicators . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .99
Identify and Remove Resource Task . . . . . . . . . . . . . . . . . . . . . . . . .99
Identify and System Attention Indicators . . . . . . . . . . . . . . . . . . . . . . . . 100
Local Area Network Analyzer . . . . . . . . . . . . . . . . . . . . . . . . . . . . 100
Log Repair Action . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
PCI RAID Physical Disk Identify . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
PCI SCSI Disk Array Manager . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
Process Supplemental Media . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
RAID Array Manager . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
PCI SCSI Disk Array Manager . . . . . . . . . . . . . . . . . . . . . . . . . . 102
PCI-X SCSI Disk Array Manager . . . . . . . . . . . . . . . . . . . . . . . . . 102
Run Diagnostics . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 102
Run Error Log Analysis . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 102
Run Exercisers . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103
Exerciser Commands (CMD) . . . . . . . . . . . . . . . . . . . . . . . . . . . 103
Abbreviations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
Memory Exerciser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
Tape Exerciser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
Diskette Exerciser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
CD-ROM Exerciser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104
Floating Point Exerciser . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105
Save or Restore Hardware Management Policies . . . . . . . . . . . . . . . . . . . . 105
SCSI Bus Analyzer . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105
SCSI RAID Physical Disk Status and Vital Product Data . . . . . . . . . . . . . . . . . . 106
SCSD Tape Drive Service Aid . . . . . . . . . . . . . . . . . . . . . . . . . . . 106
Spare Sector Availability . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
SSA Service Aid . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
System Fault Indicator . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
System Identify Indicator . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
Update Disk-Based Diagnostics . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
Update System or Service Processor Flash . . . . . . . . . . . . . . . . . . . . . . 108
7135 RAIDiant Array Service Aid . . . . . . . . . . . . . . . . . . . . . . . . . . 109
Command Examples . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 109
7318 Serial Communications Network Server Service Aid . . . . . . . . . . . . . . . . .110
Chapter 8. Verifying Hardware Operation . . . . . . . . . . . . . . . . . . . . . . 111
Considerations Before Running This Procedure . . . . . . . . . . . . . . . . . . . . . 111
vi Eserver pSeries 655 User’s Guide

Loading the Online Diagnostics in Service Mode . . . . . . . . . . . . . . . . . . . . . 111
Running Standalone Diagnostics from a Network Installation Management (NIM) Server . . . . . .112
NIM Server Configuration . . . . . . . . . . . . . . . . . . . . . . . . . . . .112
Client Configuration and Booting Standalone Diagnostics from the NIM Server . . . . . . . .112
Default Boot List and Service Mode Boot List . . . . . . . . . . . . . . . . . . . . . .114
Chapter 9. Hardware Problem Determination . . . . . . . . . . . . . . . . . . . . .115
Problem Determination Using the Standalone or Online Diagnostics . . . . . . . . . . . . .115
Problem Determination When Unable to Load Diagnostics . . . . . . . . . . . . . . . . . 120
Appendix A. Environmental Notices . . . . . . . . . . . . . . . . . . . . . . . . 123
Product Recycling and Disposal . . . . . . . . . . . . . . . . . . . . . . . . . . . 123
Environmental Design . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 123
Acoustical Noise Emissions
(1, 2)
. . . . . . . . . . . . . . . . . . . . . . . . . . . 124
Appendix B. Notices . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 125
Appendix C. Removing and Replacing PCI Adapters . . . . . . . . . . . . . . . . . . 127
Removing a PCI Adapter Cassette . . . . . . . . . . . . . . . . . . . . . . . . . . 128
Replacing a PCI Adapter Cassette . . . . . . . . . . . . . . . . . . . . . . . . . 131
Removing a Non-Hot-Pluggable PCI Adapter . . . . . . . . . . . . . . . . . . . . . 133
Replacing a Non-Hot-Pluggable PCI Adapter . . . . . . . . . . . . . . . . . . . . . 133
Hot-Pluggable PCI Adapter . . . . . . . . . . . . . . . . . . . . . . . . . . . 134
PCI Hot-Plug Manager Access . . . . . . . . . . . . . . . . . . . . . . . . . . 137
PCI Adapter or Blank Filler Removal from a Snap-Assembly-Type Cassette . . . . . . . . . 140
Replacing an Adapter in a PCI Adapter Cassette . . . . . . . . . . . . . . . . . . . . 152
Short Adapter or Blank Filler Installation . . . . . . . . . . . . . . . . . . . . . . . . 156
Long Adapter Installation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 173
Index . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 191
Contents vii

viii Eserver pSeries 655 User’s Guide