MHF-G9.1 度重なる不具合の境地
2016年3月9日（水） 予兆
3/9の定期メンテナンス終了後サーバー1のみサーバーに障害が発生しており、
同日の17:15～19:00に
緊急メンテナンスが行われた。
2016年3月11日（金） 最長メンテナンス発生
しかしながら、翌3/10夜ごろから再びサーバーが不安定となり、その対応のために金曜の11日10～12時にかけて臨時メンテナンスを実施する予定だった。
…が、夜～深夜にかけて報告された不具合が、
特定ワールドに入れない、落とされたあとログインできない、データがロールバックされている
など想定以上だったらしく、緊急メンテナンスに繰り上げされ時間も前倒しして真夜中の3:50から行われることになった。
しかし終了予定25分前の11:35、以下の告知が…
データベースサーバー障害の影響により、
データの巻き戻りをともなう
深刻な不具合が発生している状況を確認しております。
本件への調査および対応のため、
17:00までメンテナンスを延長させていただきます。
この度は多大なご迷惑をおかけし、大変申し訳ございません。
今しばらくお待ちくださいますようお願いいたします。
また本件につきましては、各種コース利用権の補償
および、ご迷惑をおかけしていることへのお詫びの実施を
検討させていただいております。
詳細につきましては、決まり次第改めてお知らせいたします。
見えないところで、かなりサーバーに負荷がかかっていたらしく、障害もかなり大きいものであった模様。
メンテナンスも5時間延長されることになり、各種補償の検討も予定されることになった。
更に16:30になって再度19:00までの延長が告知された。
そして最終的には2016年3月9日(水) 6:30時点までのロールバック、
つまり
11日19時に定期メンテナンス終了と変わらない状態となってしまった。
原因は経年劣化が発生していたゲームデータベースサーバーのハードウェア交換・プログラムバージョンUPを行った結果、
急激な高負荷状況及び待機サーバーへの頻繁な切り替わりに付随するゲームデータ破損が起きてしまい、これにより水曜以降のゲームデータの復旧が困難となったため。
詳細及び再発防止策・補償などについてはこちらを参照のこと。
この補償として、3/16までサーバー1の全アカウントに対し狩人応援コースとプレミアムコースが付与され、
1000NP、おためし小判Ｇ5枚(これは定期メンテ延長に伴う補償との合算)が配布される。
また
ウラガンキン解禁記念イベントの目標値についても緩和が行われることに。
2016年3月12日（土） 追撃の緊急メンテナンス
昨日の長大メンテが終了しホッとしたのもつかの間、13時前後にログインできなくなる障害が短時間だが発生した。
普段ならば特に触れないままで済ませる程度の障害だが、前日の事で神経質になっていたためか
しっかり告知された。
そして悪夢再び、同日16：30～18：00、まで機器の調整で再度メンテナンスが始まってしまい、更に17:50頃に19:00まで延長告知。
19:00になりインできた…と思いきや再び落とされ、同時に21時までの再延長が告知された。
21時でなんとか終了したようだが、
「引き続きサーバー動向に注視し、何か問題があれば速やかに対処を行なわせていただきます」とのことなので何かと心配ではある。
そして21:00の再開以降、アクセス制限を施しているにも関わらず再び高負荷状態が発生、
21：50から作業終了時間
未定で
緊急メンテナンスが行われた。
当初23:00に進捗状況を告知、その23:00が3:00に再び告知との内容であったためいつまで続くのかと思われたが、
予定より早い24:00に終了となった。
これによりアクセス制限と言うものが掛けられてしまった。
ログイン失敗する場合は制限に引っかかったと見て良いだろう。(´・ω・｀)とせざる負えない状態。
ちなみにこの日の緊急メンテの原因は、当初の分について言えば平たく言えば「前日の緊急メンテとは別の部分での設定漏れ」とのこと。
場合によっては1時間ほどロールバックしている(最新のデータ保存に失敗している)場合があるとのこと。
(恐らく前日の分とは別口で)1000NP・おためし小判20枚・スペリア20枚・回復G2×20個の補償が行われることになっており、こちらの配布は1回目のメンテ終了後すぐに始まっている。
3/14（月） 臨時メンテナンス
上記の通り3/13はアクセス制限がかかりながらもメンテナンスなしで越すことができたが、
翌日に度重なるサーバー障害の対策のため
臨時メンテナンスを行うこととなった。
日曜日にサーバーを止めるわけにはいかないため月曜になったと思われる。
こちらは延長も無く15:00に無事終了。
また、サーバー負荷対策が完了したらしくアクセス制限も15:30に解除されている。
- サーバー1の全アカウントにHL/EXコース付与（※）
- 不定期配信となっていたちびガンキンのクエストは3/16定期メンテナンス後からイベント終了まで常時配信
- 95回狩人祭登録祭期間延長及び入魂祭期間延期
- 各種RP4倍、剥ぎ+1などの報酬ブースト（※）
- 「デイリーのススメ 秘伝天昇＆秘伝継承シリーズ」の開催期間を3月23日メンテナンス開始まで延長
- 1日に受注できるデイリークエストの回数を3回に増量（※）
※：2016年3月16日（水）メンテナンス終了後～2016年3月23日（水）メンテナンス開始まで
また、当該期間に有効だったコースの補償は別口で行われる。
コース付与以外の設定は全てのアカウント(360、W1含む)が対象となる。
更に、ロールバックされた期間（3/9の定期メンテ～3/11の緊急メンテ開始まで）にプレイヤーが入手したアイテムについて、
メゼポルタ広場に帰還した段階で獲得しているものについてはデータが存在しており補償が可能であることが同日22：30に判明。
現在補償の対象となる（データが残っている）クエストを調査中のようだ。
ただしゼニー・Gゼニー・ギルド貢献Pは残念ながらデータが残っていなかったらしく補償の対象外となる。
3/15（火）緊急メンテナンス再び→MHFが止まった一日
しかし23:20頃からクエスト後広場に戻るまでのローディングに数分かかるという事態が発生。
耐えかねて再ログインしようとするも入れないなどということが報告される。
そして日付が変わる直前・・・
通信切断の調査目的で、何度目かという
緊急メンテが告知された。
公式では23:30～となっているが実際は0時過ぎまでプレイが可能であった。
そして3/15/1:00の進捗報告により「急なログイン数増加によるデータベースサーバーのダウン」が原因と発表された。
追っての報告は3：00となったがその内容は・・・
「引き続き問題の調査を実施しているが、原因究明には繋がっていないため、修正まで長期化する可能性がある。
3月9日（水）のメンテナンス前までのサーバー構成への復元を第一に考えた検討、対応を行い、
早急にサービスの再開を行なえるよう作業を行うが、作業の検証と作業後の検証などを含めると、
10時間ほどの時間を要する見込み」というものだった。
そして次回の進捗報告の11:00頃にて、一連の不具合の原因が
今後を見据えたサーバー増強そのものであったことが判明。
構成復旧の影響範囲が大きく、慎重な動作確認が必要なため、
現段階で最短21時頃がメンテナンス終了というアナウンスがなされた。
しかしながら、18:00に告知された進捗によると21:00の終了は難しいとのことで、
21:00により具体的な進捗及び今後の対応が告知されるようだ。
そして来る21:00、当日の復旧が難しいことが告知され、水曜定期メンテナンス時間も用いて復旧作業を継続することが明かされた。
よって、MHF初となる丸1日プレイできない日が誕生してしまうことになってしまった。
なお、21:00頃といいつつ実際に告知が更新されたのが21:15だった辺り、内情が伺える。
しっかり確認している人への配慮もあるのか、次回告知は23:00までに行うことが予告された。
そして少し早い22:10に第一報が報じされた。
サーバー増強自体は全サーバーで行っており、それを全て安定動作が確認されている旧段階に戻すことが判明し、
全プラットフォームにてデータの引き継ぎが可能であるか検証中であるとのことが報告された。
なお、仮に不可能と判断した場合は3/9定期メンテ開始前にロールバック、
つまり3月第2週消滅という最悪な結果になる可能性がある事も告知されている。
この起こりうる最悪の結果は1鯖だけでなく、4鯖、W1鯖も対象(つまり全アカウントのプレイデータのロールバック)となる。
無論最悪の結果は回避すべく行動しているとのことで、翌16日10:00に結果を報告する予定である。
そしてメンテナンス終了予定時刻が17:00であることが告知された。
これによってメンテナンス時間は合計41時間30分という長丁場になり、
同時に緊急メンテナンス最長時間という、ある意味不名誉と言える記録まで更新してしまった。
(特に2016年のキーワードがキーワードだけに)
3/16 運命の1日
そして運命の10/16 10:00(実際はやや遅れていた)……
その結果は……全てのデータが問題なく旧バージョンのサーバーに乗せられることが判明。
1週間消滅という最悪の結果を回避することはできたようだ。
一応書いておくと、1鯖は3/14緊急メンテ直前(23:30)のデータ、4鯖とW1鯖は3/16の定期メンテ開始時点のデータで再開される。
ただし3/9以前からもサーバートラブルがちょこちょこ存在していただけに、
この状況が本当に落ち着くかどうかはメンテ明け、及び後述のアップデートメンテナンスを迎えてからが勝負となるだろう。
メンテは予定通り17時に終了したが、念には念をということでかログイン時のアクセス制限が再度設定されている。
これは状況を見て段階的に解除していくとのこと。
この影響として、第3週である3/16予定の「極み咆えるジンオウガ」については、
翌17日に定期メンテナンス分となるアップデートメンテナンスを実施し、その後解禁という形が取られることが報じられている。
まとめ
メンテ
| 日付 |
時間 |
延長 |
種別 |
| 3/9 |
6:30～16:40（10時間10分） |
40分 |
定期 |
| 3/9 |
17:15～19:00（1時間45分） |
- |
緊急 |
| 3/11 |
3:50～19:00（15時間10分） |
7時間 |
緊急 |
| 3/12 |
16:30～21:00（4時間30分） |
3時間 |
緊急 |
| 3/12 |
21:50～24:00（2時間10分） |
- |
緊急 |
| 3/14 |
13:00～15:00（2時間） |
- |
臨時 |
| 3/14～16 |
23:30～17:00(41時間30分) |
- |
緊急 |
| 合計 |
77時間15分 |
|
|
補償内容
| 補償範囲 |
補償内容 |
| サーバー1 |
狩人応援コース＋プレミアムコースの付与(3/16まで)、NP1000、おためし小判Ｇ5枚(3/30まで) |
| 1000NP、おためしＧ小判20枚、スペリア20枚、回復G2×20個(3/30まで) |
| 3/9～3/14 23:30までに得られていたはずのアイテムを補償(後述) |
| 購入アイテムの補償(後述) |
| 3/9～3/11の間に有効だった各種コース(HL等含む)の3日間クーポン(3/23より配布開始) |
猟団長の降格処理の見送り
3/11緊急メンテ時に降格したキャラクターは3/16に猟団長へと戻される |
| 復帰区の権利+1週間(3/9～3/16メンテ終了まで復帰区が有効だったアカウントに対して実施) |
サーバー1、
かつ当該期間※にネットカフェ利用有 |
18,780NP(3/17から受け取り開始) |
| 秘伝魂の結晶1個(受け取り済みの場合 3/16に取り出し専用倉庫に配布) |
| 全サーバー |
3/16～3/23までHL・EX・プレミア・狩コ付与 |
| 3000NP、きんぴか小判G100枚（上記とは別枠 受け取り期間は3/30まで） |
| 狩人祭の登録祭を1週間延長 |
| 報酬ブースト強化(3/23まで) |
| 秘伝天昇＆秘伝継承シリーズ配信延長、デイリークエストの回数を3回に増量(3/23まで) |
| ウラガンキンの不定期配信クエを常時配信に変更(3/23まで) |
| 精錬のススメ、未知なる脅威の来襲、たっぷりクエなどの配信(3/23まで) |
得られていたはずのアイテムについては、
- クリア報酬アイテム
- 剥ぎ取り／採取で入手したアイテム（これらは広場に戻った時点のものが返却される)
- 大討伐の褒賞
- ショップで購入・交換したアイテム
- カプリンクで入手したアイテム
が3/16のメンテ終了後に取り出し専用倉庫に配布される。(当初3/23予定だったが、前倒しされた)
クエストは今の所
- 期間限定クエスト(烈種・始種・遷悠・イベントなども含まれると思われる)
- ハンターズクエスト
- Ｇランククエスト
- 特別クエスト
- プレミアムクエスト
- はじめてのクエスト
- 秘伝書育成クエスト
- 大討伐クエスト
- 復帰クエスト
- 猟団クエスト
が決定している。
なお該当期間について、当初3/9メンテ後～3/11メンテ終了の間に購入したものを補償するとなっていたが、
その後もサーバーが不安定な状態が持続していたことや、アカウントによっては小規模ロールバックも発生していた事から、
3月9日(水)定期メンテナンス終了後～3月14日(月)23:30に受け取った上記のアイテムが補償されることになった。
購入アイテムについては、上と同じ理由により3月9日(水)定期メンテナンス終了後～3月14日(月)23:30に受け取ったアイテム、イベントコードについて補償されることになった。
なお同週から販売された「ハリセンネコのワクワクびっくり箱」については、
3/9～3/11のロールバック期間における確認可能なデータに入手記録が残っておらず、
確率で入手できるアイテムに関して、最大量のアイテムを購入数分補償するとのこと。
具体的には「ベンディ生産券×60、Nの塊×50、ルヴナン生産券×60、太陽のくさび石×50」である。
これについては受け取り倉庫ではなくガイドから直接受け取る形になる。
ネットカフェの接続補償については、
2016年3月9日(水)定期メンテナンス終了後～3月11日(金) 3:50が対象となる。
ちなみにNPについては当初接続時間に応じた配布を予定していたが、確認可能なデータに接続時間が残っておらず、
巻戻りが発生した可能性がある期間中に入手できる最大量のＮポイントを補償することになったとのこと。
受け取り方法も当初の直接配布ではなく、ガイドから受け取る形に変更されている。
総括
結果としてサーバー1の3月第2週のプレイ不可能時間は、ロールバックの分を含めなかった場合でも約77時間、
ロールバック期間=プレイできなかった時間と換算した場合は100時間超えという超長時間になってしまった。
ログイン制限がかかりながら、という前提だが丸一日まともにプレイできてデータもしっかり反映されたのが1週間の内3/13だけだったということからも今回の不具合の異常さがお分かりいただけるだろうか。
サーバー1は約2日間のロールバックが発生しており、一応素材などある程度は補償可能となったものの、
かつての
朝鯖を大きく超え、ステップアップメンテナンスどころではない、
MHFの歴史上最大最悪の不具合となってしまった。
また、この不具合は
無関係のXbox360、WiiUユーザーも含めた1週間の全データロールバックの可能性という
オンゲとしてあるまじき破滅的な危機にまで発展してしまっている。
幸い、全鯖データロールバック不可避という最悪の展開は免れたが、
MHF運営曰く「どんな言葉やお詫びをもってしても、取り返すことのできない失態」である事は間違いなく、
ここからの信頼回復は並大抵の物ではないと思われるだろう。
また、スケジュールを含む今後のMHF-Gの動向にも傷跡を付けてしまい、2016年のキーワード「再起」に泥を塗るだけでは済まない事態に。
プロジェクトRや今後のアップデート計画に関しても決して無関係ではない影響が生じていることは容易に想像できる。
なお今回の件の発端となったサーバー増強は、長年の運用で老朽化していたことや、
定期イベ重複などの今後の負荷増大を見据えた処置であったのに、
それが旧バージョンから変わらないというのは今後の運営に爆弾を抱えたままであるともいえる。
これについては安全確実に出来る方法を検討しており、今回の件が落ち着いたら発表するとのこと。
いずれは再び着手しないといけない事案だが・・・ユーザー、運営どちらも戦々恐々であろう。
