EMC Atmos Installation instructions

EMCCORPORATION
CorporateHeadquarters:
Hopkinton,MA 01748‐9103
1 ‐508‐435‐1000
www.EMC.com
EMCATMOS
HardwareGuide
Revision1.6

2
©2009EMCCorporation.Allrightsreserved.
EMCbelievestheinformationinthispublicationisaccurateasofitspublicationdate.Theinformationissubjectto
changewithoutnotice.
Theinformationinthispublicationisprovided“asis.”EMCCorporationmakesnorepresentationsorwarrantiesofany
kindwithrespecttotheinformationinthispublication,andspecificallydisclaimsimpliedwarrantiesofmerchantability
orfitnessforaparticularpurpose.
Use,copying,anddistributionofanyEMCsoftwaredescribedinthispublicationrequiresanapplicablesoftwarelicense.
EMCisaregisteredtrademarkandAtmosisatrademarkofEMCCorporation.Allothertrademarksusedhereinarethe
propertyoftheirrespectiveowners.

3
Contents
Preface . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5
Documentation...................................................................5
InfiniFlexDocumentation..........................................................6
1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7
GeneralSpecifications.............................................................8
StorageandServerElements........................................................8
GeneralOperationalInformation....................................................9
2 Configurations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10
ConfigurationOverview..........................................................10
AllConfigurations...........................................................11
PromoCodes1and3.........................................................11
PromoCode5...............................................................11
ViewsofCabinets................................................................12
FrontandBackofPromoCode1...............................................12
FrontandBackofPromoCode3...............................................13
FrontandBackofPromoCode5...............................................13
3 Hardware Details . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14
DataUnavailable(DU)............................................................14
AllConfigurations...........................................................14
PromoCode1...............................................................14
BlockDiagram:PromoCode1.....................................................15
ServerDetails....................................................................16
FrontView..................................................................16
RearView...................................................................17
Disk‐enclosureDAE..............................................................18
LEDActivityConditionsforDisk‐enclosureFront................................18
LEDActivityConditionsforDisk‐enclosureRear.................................19
Switches........................................................................20
GbeSwitch:AlliedTelesisAT‐9924T............................................20
10GbeSwitch:FujitsuXG2000C................................................21
SASCablingandDisk‐enclosureConfigurations.....................................23
PromoCode1...............................................................23

Contents 4
PromoCode3...............................................................24
PromoCode5...............................................................25
NetworkDiagrams...............................................................26
PromoCode1...............................................................26
PromoCode3...............................................................27
PromoCode5...............................................................28
PowerConnections...............................................................29
PromoCode1...............................................................29
PromoCode3...............................................................30
PromoCode5...............................................................31
4 Troubleshooting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 32
Servers.........................................................................32
Servers/Switches.................................................................33
DiskConfigurations..............................................................35
Disk1:60Configuration...........................................................37

5
Preface
ThisdocumentdescribesthehardwarecomponentsoftheEMC®Atmos™platform.
Documentation
ThefollowingdocumentscomprisetheAtmosdocumentationset.YoucanfindthematEMCʹs
PowerlinkWebsite(powerlink.emc.com).Afterloggingin,selectSupport>TechnicalDocumentation
andAdvisories,thenthelinkstosoftwareorhardwaredocumentationforAtmos.
Document Description Intended Audience
EMCAtmosReleaseNotesPresentssummaryinformationabout
changesinagivenrelease.
Anyonepreparingforanew
Atmosrelease.
EMCAtmosConceptual
Overview
Presentsahigh‐leveloverviewof
Atmos.
AllAtmosusers.
EMCAtmosInstaller’s
Guide
Explainshowtoinstallandconfigure
AtmosonVMwareandphysical
hardware.Also,introducestheAtmos
installablefilesystem,andprovides
installationandconfiguration
instructionsforit.
Anyonewhoinstallsand
configuresAtmossoftware
andplanstoaccesstheir
Atmossystemviaafile
system.
EMCAtmosSystem
Administrator’sGuide
Describeshowtousethe
system‐managementGUItoaccess
andmanageAtmosserversoftware.
Atmossystemmanagers.
Alsobackgroundforanyone
whoinstallsAtmossoftware.
EMCAtmosProgrammer’s
Guide
ExplainshowtousetheAtmos
Web‐serviceAPIstocreateobjects
andmanagetheirrelatedmetadata.
Developerswhobuildor
deployapplicationsusing
theAPIs.
EMCAtmosSecurity
ConfigurationGuide
Providesanoverviewofsettings
availabletoensurethesecure
operationofAtmos.
Atmossystemmanagers.
EMCAtmosNon‐EMC
SoftwareLicense
Agreements
Presentslegalnoticesfornon‐EMC
softwarethatisavailablethrough
Atmos.
—
EMCAtmosHardware
Guide
Describesthehardwarewhichisthe
foundationoftheAtmosplatform.
Thisdocumenthasadifferent
numberingschemethantheother,
softwaremanuals,becauseithasa
differentreleaseschedule.
Anyonewhoinstallsand
maintainsAtmoshardware.

Preface 6
InfiniFlex Documentation
Thefollowinghardwaredocumentationisavailableonline:
XDS‐9924TInstallationandReplacementGuide(P/N300‐006‐885,rev1)
XDS‐F20P‐10GigEInstallationandReplacementGuide(P/N300‐006‐884,rev1)
XReplacingaBlowerModuleinanInfiniFlexDAE
XReplacingaDiskModuleinanInfiniFlexDAE
XReplacingaLinkControlCardinanInfiniFlexDAE
XReplacingaPowerSupply/SystemCoolingModuleinanInfiniFlexDAE
XSVR‐D1U‐1950SVR‐D2U1950InstallationandReplacementGuide(P/N300‐006‐688,A02)
XInfiniFlex44UCabinetUnpackingandSetupGuide(P/N300‐006‐918,A01)
XSitePreparationGuideforInfiniFlexStorageSystemsina44UCabinet(P/N300‐005‐849‐03)

7
1Introduction
TheEMC®Atmos™platformaddresscustomers’requirementsforstorageofactivecontent.Atmos
hardwareisaserver‐basedJBODstorageplatformthatisoptimizedtorunAtmossoftware.
AtmoshardwarecomprisesthehardwarecomponentsnecessarytosupportaJBOD‐based,
bulk‐storageplatform.Thesystemoptionallysupportshigh‐availability(HA)powerendtoend.
TosupportJBOD,Atmoshardwareincludes1UIntel‐basedDell1950serverswithanLSISASHBAthat
providestheconnectiontoSATAdisks.
Toachievethehighestdensity,diskenclosures(disk‐enclosureDAEs)aremountedinaspecially
designed44UAtmoshardwarerack.ThisrackisdesignedasastandardITcabinet,holdstwoDAEsin
asingle3Ushelfheight,andsupportstheweightof360disksandassociateddiskenclosures,servers,
andnetworkswitches.
CustomersconnecttotheAtmossystemoverGbeportsor10Gbeportsbasedonswitchconfigurations.
Customersprovidetheirowninterconnectcables.
Atmoshardwarehasthefollowingfeaturesandbenefits:
XProvidesconfigurationflexibility:youcanvaryserver‐to‐driveratios.
XUses1Uservers,whichallowdata‐in‐placeserverupgrades.
X30drivesin3U.
XLeveragesCLARiiONUltraPointdesignandreliability.
XEnablesrapiddeploymentonapetabytescale,worldwide.
XUsesEMCfactory‐directconfigurations.
XAdoptstheanytime,anywhereservicemodel(bycustomers,EMC,orboth).
XAppliesEMCengineeringbestpracticesandproductquality.
XRequiresnospecialpowerandcoolingrequirements.
XDenseandstandardracks,withcustomizableconfigurations.
XStorageonamassivescale.
XHardwareismanagedbyAtmossoftware.

1:Introduction GeneralSpecifications 8
General Specifications
Storage and Server Elements
Power SomeHAconfigurations
(3‐6)220VL6‐30singlephase
Max10,300W
Infrastructure Gbeor10Gbe
1:15or1:60server‐to‐driveratio
240‐360TB(Atmoshardwarerackconfiguration)
120TB(Titanrackconfiguration)
Servers Dell1950
DualhardwareRAID1internaldisks
Server-platform Features Server Configuration Disk-enclosure DAE Platform
Features
X64‐bitdual‐coreIntelXeon
processor5100on65nm
technology
XQuad‐coreprocessor
(5400 technology)
XStandard19ʺNEMA
rackable,20ʺdeep
XOptionalHA/non‐HA
power(AConly)
XTwo1GbEthernetports
XHarpertown2.33Ghz
X4GBFBDmemory
XDVDROM
XDual250GBSATA3ʺHDD
(HWRAID1)
XLSI3801SAScontroller
XOptionalIntel9502CX4
10Gcontroller
X15SATAdriveJBOD
XCost‐efficient,nativeSATA
drivedeployment
XUltraPointchassis,power,
andcooling
XOptionalHA/non‐HA
powerconfiguration
XEasyaccesstoall
field‐replaceableunits
XSESdisk‐enclosure
management
XWideSASports(x4
channels)onminiSAS
cables
XStandard19ʺNEMA
rackable,14ʺdeep
XWorldwidepower

1:Introduction GeneralOperationalInformation 9
General Operational Information
Dataprotectionisaccomplishedwithdatareplicationonmultipleservers.Thesystemdoesnotrequire
orsupportRAIDforcustomerdata;dataisprotectedbyredundantcopies.ServerscontainanLSI3801
simpleSAS/SATAHBAforcustomerdata.ServerssupporthardwareRAID1mirrorsfortheinternal
operating‐systemdrives.
Diskconfigurationisbasedonratiosof1:15or1:60percabinet.NoRAIDisused,so15or60physical
disksarepresentedtotheoperatingsystem.Aserverfailurecausesthesystemtoloseaccesstoall
drives.Thereisnocaching,sothereisnopotentialfordataloss.
Thesystemsupportsemailhome,dependingoncustomer‐servicelevels.
DiskdrivesandDAELEDscanbeblinkedmanually.

10
2Configurations
Configuration Overview
Atmoshasthreepromo‐codeconfigurationsfordeployment.Promocodes1and3leveragethe
InfiniFlex20000hardwarecomponentsandrackenclosure;Promo5usesInfiniFlexhardwareina
NEMA‐standard40Urack.Thepromo‐codeconfigurationsarelistedbelow.
Promo 1 Promo 3 Promo 5
General specifications:
TB/cabinet 360 240 120
Server:driveratio 1:60 1:15 1:15
Diskdrives Hitachi1TB,7200rpm
(seenotesfollowing
thistable)
Hitachi1TB,
7200rpm
Hitachi1TB,
7200rpm
Network Gbe Gbe Gbe
Redundancy Fan PDU,PS,fan PDU,PS,fan
Servers(1UDell1950s) 6 16 8
3Udisk‐enclosureDAEs 24(12 trays) 16
(8 trays)
8
Gbeswitches 1AlliedTelesis
24‐port
2AlliedTelesis
24‐port
1AlliedTelesis24‐port;
2L6‐30dropsrequiredfor
redundancy,ifdesired
10Gbeswitches N/A N/A N/A
Cabinet specifications:
Height 82ʺ82ʺ75ʺ
Width 24ʺ24ʺ24ʺ
Depth 43ʺ43ʺ40ʺ
Weight(lbs) 2548 2282 1,356lbs
Maximumpower(W) 10,160 9,760 4,880W
L6‐30Drops 3 6 2
Maximumheat(BTU/hr) 34,676 33,311 16,655

2:Configurations ConfigurationOverview 11
All Configurations
XAtmossoftwareisloadedinthefield(notinmanufacturing).
XServersshiptocustomerswithnooperatingsystem.
Promo Codes 1 and 3
XStandard44UAtmoshardwareracks
XIAX86open‐standardsarchitecture
XDisk‐enclosureSAS/SATADAEs
XIn‐lineconfiguration,30drivesin3U
XShipspre‐rackedandpre‐configured
X44U19ʺNEMArackenclosure
XFullserviceaccessibility
XFront‐to‐backcooling
XCleancablingdesign
XPromocode1willbeshippedwith5400rpmWesternDigitaldrivesassoonasthosedrivesare
qualified;thiswilllowerthepowerconsumptionofthisconfiguration.
Promo Code 5
X40Urack
XDesignedto4900Watts/rack
XIncludesHApower;2PDUs/rackforHA,eachfedby220v,L6‐30,single‐phase
XPowerrequirements:
ZServer(8):1920W
ZDAE(8):2880W
ZGbESwitch(1):80W

2:Configurations ViewsofCabinets 12
Views of Cabinets
Front and Back of Promo Code 1
Therackfrontonthelefthastrimandfrontdoorintact.Therackfrontinthemiddlehastrimandfront
doorremovedandstoragetraypulledout.

2:Configurations ViewsofCabinets 13
Front and Back of Promo Code 3
Therackfrontonthelefthastrimandfrontdoorintact.Therackfrontinthemiddlehastrimandfront
doorremovedandstoragetraypulledout.
Front and Back of Promo Code 5

14
3HardwareDetails
Data Unavailable (DU)
AfailureonmostsystemcomponentscausesaDataUnavailable(DU)untilthecomponentisreplaced.
ThissectiondescribesgeneraloperatingbehaviorwithrespecttoDUconditions.
Atmossoftwaretoleratesfailedcomponents,anddependingonthecustomer’spolicy,thelossoroneor
morecomponentswouldnotmakedataunavailableatthesystemlevel.Forexample,iftherearethree
replicasandonefails,thecustomer’sdatawouldstillbeavailable.
All Configurations
XThereisoneserverconnectedtotheDAEs;thereisnoHApath.
XTheSAScablescontainfourlanesofSAScommunication.
XTheDAEscontainasingleLCCboardwithnohardwarefailovercapabilities.
Promo Code 1
XAllcomponentsinthesystemcontainonepowersupply.
XAnypowersupplyfailurecausesaDU.
XTheSAScablestotheDAEsareseriallychained.
XAfailureontherearDAEcausesaDUontheentireserver.
XTheswitchesalsocouldbeasingle‐pointfailurewhichcausesaDU.Theswitchesdohave
redundant,field‐replaceablepowersupplies.

3:HardwareDetails BlockDiagram:PromoCode115
Block Diagram: Promo Code 1

3:HardwareDetails ServerDetails 16
Server Details
Front View
1Powerbutton
2NMIbutton(donotuse)
3Systemidentificationbutton(blinksabluestatusindicatorinfrontandback)
4LCDdisplay(showsstatusanderrormessages):
ZBlue(solid)—Everythingisokay.
ZAmber—Anerrorwasdetected.
ZBlue(blinking)—Thesystemidentificationbuttonwasselected.
5TwoUSBconnections
6Videoconnection
7Two250GB3.5”SATAHD
8SlimDVDdrive

3:HardwareDetails ServerDetails 17
Rear View
1N/A
2Serialconnection
3Videoconnection
4TwoUSBconnections
5NIC1connection(ETH0)
6NIC2connection(ETH1)
7Powersupply1
8Powersupply2(optional)
9NMIbutton
10 Systemidentificationbutton
11 Systemstatusindicator(samefunctionasfrontLEDdisplay)
12 PCIexpansionslot2
13 PCIexpansionslot1
NOTE:PromoCode1—Servershaveonepowersupply.
PromoCodes3and5—Servershavetwopowersupplies.

3:HardwareDetails Disk‐enclosureDAE 18
Disk-enclosure DAE
XDisk‐driveaccessforboththefrontandrearDAEisfromthefrontofthecabinet.
XFrontDAELCC,blowers,andpowersupplyareservicedfromthefront.
XRearDAELCC,blowers,andpowersupplyareservicedfromtherear.
XDAEtrayhastwoservicepositions:
ZExtendforwardtoservicefrontDAELCC,PS,blower,andrearDAEdiskdrives.
ZExtendbackwardtoremovetherearDAEfromtherails.
XSAScableandACcordareroutedalongthesiderailsofthedisk‐enclosuretray.
NOTE:PromoCode1—DAEshaveonepowersupplyandoneblowermodule.
PromoCode3—DAEshavetwopowersupplies
LED Activity Conditions for Disk-enclosure Front
DAE Chassis Fault LED (amber) –
Solid = Fault in any FRU in chassis
Blinking = Failure in its partner chassis
DAE Speed LED (green/blue) –
Currently, this has no function.
DAE Activity LED (green) –
Solid = Disk has power
Blinking = Disk is being accessed
DAE Fault LED (amber) –
Solid = Disk is faulted

3:HardwareDetails Disk‐enclosureDAE 19
LED Activity Conditions for Disk-enclosure Rear
Blower Only Module Power Supply Module
LCC
Fan Fault (solid amber)
Fan Power Fault (solid amber)
Blower status (green)
PS Status (green)
PS Power Fault (solid amber)
PS Fan Fault (solid amber)
Address Rotary Switch
Chassis Address 0-7 (blue) –
Indicates set address
LCC Status (green)
LCC fault (solid amber)

3:HardwareDetails Switches 20
Switches
Gbe Switch: Allied Telesis AT-9924T
X24RJ‐45connectorsfor10BASE‐T,100BASE‐T,and1000BASE‐T(AutoUplink™onallports)
X4smallform‐factorpluggable(SFP)modulesforfibergigabitEthernetinterfaces,sharedwith
copperports1/2and9/10—customersupplied,ifneeded
XRS‐232consoleport
XDualpowersupplies
XSwitchLEDindicators:
ZPerport:speed,link,activity
ZPerdevice:power,fanstatus,stackID,RPS,master
XTheSFPmodulesarenotpopulatedinthefactory.
XACcordsareroutedalongthesideoftheswitchthroughtherail.