<font size=2 face="sans-serif">In preparation for the Menlo Park power
outages this weekend, we will be failing ehpmaster over to ehpbackup. &nbsp;</font>
<br>
<br><font size=2 face="sans-serif">This is the sequence of events that
will be occurring this throughout the weekend.</font>
<br>
<br><tt><font size=2>Friday, before bldg 11 power is cut<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
remove ehp2 and ehp3 from Level3 DNS rotation - Jeremy or Chris<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
failover to ehpbackup as primary - Chris<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
turn off ehpmaster, ehp2, ehp3, and eids2 - Stan<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
switch ensX to generator power - Stan<br>
<br>
Saturday, after bldg 11 power is restored<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
don't turn on ehpmaster, it requires manual recovery just like we did &nbsp;<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; during the failover exercise.<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
turn on ehp2 and eids2 - Stan<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
switch ensX to regular power - Stan<br>
<br>
Sunday, after bldg 3 power restored<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
turn on ehp3 - Stan<br>
<br>
Monday,<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
ensure ehp2 and ehp3 are up to date - Jeremy<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
readd ehp2 and ehp3 to Level3 DNS rotation - Jeremy or Chris<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
begin recovery process for ehpmaster (start and immediately disable &nbsp;<br>
crond) - Jeremy, Chris, and Stan<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
ensure ehpmaster is in sync - Jeremy, Chris<br>
 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
failback to ehpmaster as primary - Chris</font></tt>
<br>
<br><tt><font size=2>If you have any questions, please feel free to respond
to this email.</font></tt>
<br><font size=2 face="sans-serif">----------------<br>
Thank you,<br>
<br>
Chris Bidwell, RHCT<br>
Red Hat Linux Administrator<br>
Geologic Hazards Team<br>
US Geological Survey<br>
email: cbidwell@usgs.gov<br>
work: 303-273-8642<br>
mobile: 303-435-6362<br>
</font>