徹夜明け、上野の朝

今からもう10日くらい前のことだった。
あるお客さんのあるシステムでアプリケーション上の問題があった。
それはサーバ2台のクラスタ構成になっていて、SQL Serverのフェールオーバークラスタを含む基盤部分は僕の担当だった。

アプリケーション上の問題が発生したため待機系に切り換えるため、手動でフェールオーバーを実行したのだが、現用系がシャットダウンの途中で止まってしまい、結果として期待したようにはフェールオーバーできなかった。
と言うことでアプリケーションを担当しているSEから、僕が呼び出された。

その日の業務終了後に再現テスト。
クライアントPCからサーバに対し、予想もしなかった大量のデータが発行されたため、サーバ上のあるアプリケーションの応答が無くなり、アプリケーションが機能しなくなったことがわかった。

クラスタシステムで待機系にフェールオーバーするときの基本的な流れ
・現用系サーバで数々のサービスを停止する
・仮想コンピュータ名と仮想IPアドレスを待機系に引き継ぐ
・共有ディスクを待機系にマウントする
・待機系サーバで数々のサービスを起動する

今回は現用系サーバ上でハングアップしたサービスが停止しなかったため、待機系へのフェールオーバーが出来なかったわけだ。
暫定的な回避策として、今後もし同じ状況になった場合はハングアップしたサービスの実態であるプロセスを手動で終了してもらい、フェールオーバーを正常に行うことにした。
またアプリケーションの設定見直しやパッチ適用によって、大量データの場合でもハングアップしにくくした。
最終的にはアプリケーション側で大量データの場合も正常に動作するように改修してもらうしかないけど。


で、再現テストやアプリケーション側の見直し後の耐久テストなどを終えたのが朝の4時。
アプリケーション担当のSEと一緒にお客さんを出て、最寄のJRの駅に向かって歩く。
始発は4時半くらい。
少しの間だけ駅のホームでプラプラして、各自電車に乗ってお別れ。

他の人から見たら朝まで飲んでいたように見えるんだろうな。
きっと。

(写真1)徹夜明けの上野の風景
徹夜明けの上野の風景

僕は乗り換えのために上野駅で降りたんだけど、腹が減って腹が減って我慢できなかった。
近くの松屋で晩御飯と言うか、朝ごはんと言うか、とにかくご飯を食べたのよ。
やっと落ち着いて、そこで撮った写真がこれ。

上野駅前のマルイの時計は4:55を示しています。
この後電車に乗って家まで帰り、風呂に入って、また仕事に行きました。
関連記事

コメントの投稿

非公開コメント

テスト中

全ての記事を表示する

ブロとも申請フォーム

ブログ検索
プロフィール

norimaki2000

norimaki2000のブログにようこそ
・2013/01/05テンプレートをsantaからhouseに変更
・2012/10/29テンプレートをsweet_donutsからsantaに変更
Follow norimaki2000 on Twitter気軽に話しかけてね

ニューヨーク・マンハッタン(タイムズスクェア)180×135

千葉県在住で東京都内に勤務。SE歴20年超えました。

昔々はオフコンで販売管理などのアプリケーション開発していた。
ファミリーレストランの無線オーダリングやPOS、キッチンプリンタの全国展開なんかもやっていました。
最近はWindowsサーバーとVMware vSphereを中心としたサーバーインフラの提案・構築・保守を中心にやってます。
主な取り扱い製品は、
・Windows 2000 Server以降 (もちろんNT3.5やNT4.0も知っていますが)
・Active Directory (今で言うAD DS)
・Symantec Backup Exec
・Symantec System Recovery
・CA ARCserve Backup for Windows
・CA ARCserve Replication
・CA ARCserve D2D
・EMC RepliStor
・VMware vSphere
・某メーカーのクラスタソフトウェア

どれもこれも中途半端な知識と技術力ですが、なんとかやっています。
私自身は技術や製品を担当する立場ではなく、特定業種のお客さん(ユーザ企業)の対応窓口となるSEの役割りですから、必要であれば詳しい知識や経験豊富な別のSEを探してきてプロジェクトメンバに加えます。

もちろん小さな物件では自分で提案、インストール、お客さんへの導入、アフターサポートまでやります。
大きな物件では提案はやりますが、構築部分は専門部隊に依頼します。
その場合でもアフターサポート窓口は私がやりますので、お客さんに対しては一貫して窓口SEとなります。

サーバの世界の大きなトレンドは統合・仮想化。
2007年はVirtual Server 2005 R2によるサーバ仮想化も、2つのお客さんで本稼動させた。
2008年はVMware ESX 3.5を2セット構築。単純なローカル起動と、SANブート/VMotion/DRS/HA/VCBのフル装備もやった。
2009年はぜひHyper-Vの仮想環境を構築したいな。と思っていたが、なかなか機会に恵まれなかった。
2010年はVMware ESX 4.0でHA/VMotion/VCBバックアップを進行中。

そのほかにも、ドメインコントローラやファイルサーバの全国展開とデータ移行、特定のアプリケーションの実行基盤となるサーバ群のOS・バックアップ・DBクラスタなどインフラ部分の構築などをやっています。


2011年のポイントも引き続き、【ご利用は計画的に】。
今まで長年に渡って仕事も私生活も行き当たりばったりなので、少しでも物事を計画的に進められるようにしたい。
いつも計画性の無さが災いして多くの人に迷惑をかけています。
自分自身も計画的な仕事ができないため、いつもいろいろ苦労しています。
今年はさらに計画的に仕事をするようにしなきゃ。

それと若手を上手に使うようにならなきゃならん。
若手の育成はもちろんだけど、僕自身も仕事を上手に他の人に振ることができるようになりたい。
仕事の種類のせいなのか性格なのか、どうしても一人で抱え込んでしまうから。

【Twitter】2010年の元旦から始めました。平均して1日あたり10ツィート程度です。
仕事関連の呟きが少し、くだらない呟きがほとんどかな。
Follow norimaki2000 on Twitter
・norimaki2000 on Twitter

Follow norimaki2000 on Twitter
・norimaki2000 on Twilog


オンライン上ではあるけれど、今まで知らなかった人たちと交流する機会を得ることになり、非常に刺激を受けます。
仕事でも私生活でも、いろんな人のつぶやきは息抜きにもなり、また助けられたり、あるいは「もっとがんばんなきゃ」と励みになったりします。
Twitterを考え出した人の発想、システムとして作り上げた努力と情熱はすごい!!


【好きな音楽】ベテランの皆さんなら浜田省吾、尾崎豊、エコーズ、若手なら鬼束ちひろ、平原綾香、現在注目の若手はいきものがかり

【好きなアイドル】千葉県柏市を中心に活動する地元アイドルの「コズミック☆倶楽部」を激推し中です。

【好きな飲み物】シャンパンはご存知モエ・エ・シャンドン ブリュット アンペリアル、ビールはキリン ブラウマイスター、水ならビッテル、お茶ならキリン生茶

【好きなTVドラマ】Xファイル、24、ミレニアム、ER、CSI:科学捜査班シリーズ、NCIS:ネイビー犯罪捜査班、ザ・プラクティス、ボストン・リーガル



パソコン困り事相談もよろしく


最近の記事
最近のコメント
カレンダー
07 | 2019/08 | 09
- - - - 1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31
カテゴリー
FC2カウンター
キーワード

Windows_Server VMware_ESX VMware vCenter_Server PowerShell PowerCLI VMware_Player vSphere_Client VirtualCenter Active_Directory vStorage_API Converter 文音 コズミック☆倶楽部 Windows Hyper-V Microsoft_Security_Essentials あいひょん なるみん Windows_8 VMware_Converter vSphere Backup_Exec カラオケ sora VCB SQL_Server Red_Hat_Enterprise_Linux Windows_Server_2012 System_Center Tech_Fielders VMware_vSphere 麗美 ARCserve_Backup ESX Internet_Explorer System_Recovery メモリダンプ RHEL remi Directory Server vSphere_CLI Firefox マークス Oracle ジン子 Symantec DMC-FZ1000 Backup VMware_HA vMotion Exec Active 路上ライブ Twitter schtasks  Office エミリースタイラー Vista System SE XenServer Sysinternals 氷結 Oracle_Database wevtutil Windows_Update コズミック倶楽部 NTFS キリン Visual_Studio vCenter_Converter 若手 DRS Recovery Emily_Styler sonoka 東京国際フォーラム 圧縮 スリムス カーナビ 修復 コマンドライン ついにステップワゴンを契約してしまった 一番搾り食物繊維 ラガー ATAPI 糖質 サクセス 0x0000007B スパークリングウォーター セキュリティ スパリゾートハワイアンズ スタローン ベビースター おとなのおつまみ 経済産業省 えびしお ロッキー バルボア オレッツァ corega 2008 白石美帆 カルディ エイドリアン おやつカンパニー 破損 草津 ジョシュ・ハートネット シャンプー台のむこうに デュポン ワイヤーアクション ブラックホーク・ダウン コロン ウォーター 北野 神戸 ハワイ ムエタイ マッハ けんけつちゃん 献血 お茶のチューハイ ポケモン・スタンプラリー はばたき福祉事業団 日本赤十字社 映画 東京タワー 写真 グレープフルーツ 伊藤園 掃除 雨どい カーポート 高原 グランダム セルシオ のどごし生 フィット 洗車 洗濯 バーベキュー 鬼押し出し園 羽田  サーバ 人口甘味料 関西空港 夏休み Brio キャンプ 万座温泉 サッポロ SweetGrass Tween OpenOffice Apache グループポリシー バッチ iStorage AWS robocopy Windows_Azure SkyDrive vStorag_API ARCserve_Replication -ayane- つりあやめ ARCserve_D2D こずくら Virtual_Infrastructure バックアップ イチトキ NVR500 IP38X/N500 Panasonic Intel wbadmin Windows_Serverバックアップ LUMIX FZ1000 コズミック☆LOVE Windows_Server_2016 vSphere_Web_Client Paper.li れみ 浜田省吾 Linux VMware_ESXi 加藤成実 OneDrive GR5 HUAWEI エミリー・スタイラー REAN シンガーソングライター OREZZA NetBackup NR-7900A Kit PC-Success PCI SAP Resource Replication IZZE IDE CG CDRW-AB24JL CD CR-V CoolMax Hyperion Gathers DVD STOPエラー SUPPLEX ジャンプフェスタ ITIL canaguitar DSP OpenOffice.org VMFS Wataru_Sato 佐藤航 cana OEM ULPC USB Tools Thunderbird USB2.0 Uptime.exe XP Word チャンカナ CAB 

月別アーカイブ
リンク
RSSフィード