身に覚えのない170万円の請求が……AWSの運用管理で起きた“4つのしくじり”(4/4 ページ)
クラウド専業のSIer・アイレットのインフラエンジニアが、運用管理者向けイベント「Cloud Operator Days Tokyo 2020」に登壇。AWSのマネージドサービスで起こした失敗談を語った。高額請求が来たり、予期せぬエラーが出たりといった“しくじり”があったという。
「バーストクレジット」の使い切りに注意
4つ目のしくじりは、「思わぬリソースの枯渇」。
アイレットがAWSのファイル共有サービス「Amazon Elastic File System」(EFS)を使ったシステムを構築し、運用を続けていたところ、ある日を境にサービスのパフォーマンスが極端に低下するようになった。サーバやデータベースの稼働状況には何ら問題はなく、なかなか原因を特定できなかったが、最終的に判明したのが「EFSのバーストクレジットの枯渇」という現象だった。
EFSは「バーストクレジット」と呼ばれる仕組みを通じて、パフォーマンスを自動的に調整している。これは、システムの利用量があらかじめ定められた閾値(しきい値)を下回ると「クレジット」がたまり、上回った場合は、たまっているクレジットを消費することで性能を一時的に引き上げられる仕組みだ。
ただし、このバーストクレジットを全て使い切ってしまうと、基本性能以上の性能は出なくなる。そのため、高い負荷が掛かった場合には極端にパフォーマンスが低下する。
今回構築したシステムでは、このバーストクレジットの監視を行っていなかった。そのため、画像の読み込み時など大容量のデータを扱う際に、基本性能を超過してバーストクレジットを使い切ってしまい、パフォーマンス低下を引き起こしていた。
「最終的にはバーストクレジットを使わずに、あらかじめパフォーマンスを指定できる『プロビジョンドスループット』というモードに切り替えることで事なきを得た。バーストクレジットの仕組みはEFS以外にも、EC2のCPUやEBSなどにも適用されているため、今後は同じ問題に直面しないよう、あらかじめその動作を把握しておくことが重要だ」(古屋さん)
高額請求が来たり、予期せぬエラーが出たり、突然止まったり……。便利な印象のあるクラウドだが、その運用は一筋縄ではいかないようだ。だが古屋さんは、これらの失敗の原因を突き詰め、対策を練る中で、新たな知識を得たとしている。
関連記事
- コロナ禍でテレワーク普及も、日本はクラウド後進国のまま? その裏にあるSI業界の病理
新型コロナウイルスの感染拡大に伴い、企業活動がオンラインにシフトしつつある。だが日本企業では、依然としてクラウド活用が進んでいないという。その要因について、ガートナージャパンのアナリスト、亦賀忠明氏に聞いた。 - 「リモートアクセスできない」――コロナ禍のテレワーク、ITインフラの課題が浮き彫りに 打開策は「クラウド」が首位
ITmedia NEWSが「コロナ禍におけるクラウド活用」に関する読者調査を実施。テレワーク環境の課題として「社員のリモートアクセス権がない/不十分」「ITインフラの負荷が増大する」などが挙がった。解決策として最多だった手段は「クラウドサービスの導入」。業務効率化やITインフラの可用性向上などを期待する声が集まった。 - IaaS市場はなぜ伸びている? 大手3社の戦略の違いは? クラウド業界事情を基礎から徹底解説
クラウドは2000年代半ばに登場した比較的新しい技術でありながら、現在では当たり前の存在となった。目まぐるしく変化を続けるクラウドへの理解を深めるため、市場の中でも特に成長が著しいIaaS領域に着目し、世界の主要ベンダーとその動向をみていこう。 - 「クラウドは信頼できない」は本当か? AWS、Office 365、自治体IaaSの障害を経て、私たちが知っておくべきこと
2019年は国内外で、大規模なクラウドサービスの障害が相次いで発生した。それに伴い、「クラウドサービスは信頼できないのでは」といった議論も巻き起こった。だが、オンプレミスにも課題はある。メリットとデメリットを認識した上で、クラウドとうまく付き合っていくべきだろう。そのために必要な基礎知識と考え方を、ITジャーナリストの谷川耕一氏が解説する。 - 「君、今日からクラウド担当ね」 未経験者が1人で始めた、ファミマのAWS移行の舞台裏
「AWS Summit Tokyo 2019」のセッションに、ファミリーマートでクラウド移行の責任者を務める土井洋典さんが登壇。土井さんは、前任者が突然退職したため、ある日突然上司からクラウド担当を任された経験を持つ。たった1人でのスタートだったというが、どうやってAWS移行を成功させたのだろうか。
Copyright © ITmedia, Inc. All Rights Reserved.