「あけおめメール」に備えろ！ KDDIが装備したデータ分析基盤とは？（1/2 ページ）

元日になった瞬間に飛び交う「あけおめメール」は、トラフィックを圧迫される通信事業者にとって、実に悩ましい存在だ。年末年始に向けてKDDIが約2カ月で構築した秘策とは？

[國谷武史，ITmedia]

　家族や知人へ年始のあいさつを伝える「あけおめメール」（あけましておめでとうメール）は、毎年1月1日になった瞬間に飛び交う風物詩ともなった。しかし通信事業者にとっては、トラフィック量が瞬時に跳ね上がることで輻輳（ふくそう）などのネットワーク障害が起こりかねず、実に悩ましい存在だ。

　このためKDDIは、メールのトラフィック状況などを瞬時に可視化できることを目的に、2014年10月にログ共通基盤「LKB」の構築をスタート。12月中旬までの約2カ月で完成させた。巨大なトラフィックが生み出す膨大なログデータを処理できる分析環境をどうやって構築したのだろうか。

Excel分析では大変

Splunkのカンファレンスで講演したKDDI プラットフォーム開発本部の水谷聡氏

　LKBの構築プロジェクトを担当するプラットフォーム開発本部プラットフォーム技術部 インフラ基盤2グループ課長補佐の水谷聡氏によると、従前の環境ではシステムごとにログサーバやログビューワなどを用意して、システムごとにログ分析を行っていた。

　「Excel分析やgrepによる検索を実施していましたが、やはりシステムごとに行うのでは開発や運用などのコストがかかり過ぎるなどの課題がありました。そこでHadoopを利用してログを分析、可視化するために『LKB』の開発に着手しました」

　LKBシステムでは“早い”“安い”“うまい”をコンセプトに掲げて、ほぼ内製で開発を行ったという。水谷氏によれば、ログからどのような分析を実施して情報を可視化したいかは、システムを利用する部門ごとに異なる。一方、水谷氏の所属するプラットフォーム部門では個別の分析ニーズがどのようなものかは、なかなか分かりづらい。

　「ニーズごとに分析環境を設計、構築していたのでは時間もコストもかかりますし、分析経験を持つ人材も限られました。分析基盤では新しく使い始めてもすぐに簡単に使いこなすことができる汎用性が求められました」

　LKBでは各種システムから出力される大量のログデータを一元化し、Hadoop環境で検索や分析、可視化を行えるSplunkのHadoop向け分析ツール「Hunk」を使って処理する。

（※変更履歴……初出時に講演資料の撮影画像を表示しておりましたが、KDDI株式会社の意向により、画像掲載を中止いたしました。）

事例記事ランキング

• 本日
• 週間
• 月間

1. 日清食品HDのCIOが語る、生成AIの全社活用と自社環境構築の舞台裏
2. 元組み込みエンジニアの農家が挑む「きゅうり選別AI」　試作機3台、2年間の軌跡
3. 借金10億円、倒産まであと半年――創業100年の老舗旅館「陣屋」をたった3年でV字回復させた方法
4. ベネッセ社員が産休から復帰しても“浦島太郎”にならないワケ
5. サンリオの「キティちゃん」を支えるデータベースのチカラ

1. 日清食品HDのCIOが語る、生成AIの全社活用と自社環境構築の舞台裏
2. 借金10億円、倒産まであと半年――創業100年の老舗旅館「陣屋」をたった3年でV字回復させた方法
3. サンリオの「キティちゃん」を支えるデータベースのチカラ
4. 元組み込みエンジニアの農家が挑む「きゅうり選別AI」　試作機3台、2年間の軌跡
5. これを旅館と呼んでいいのか!?　老舗旅館「陣屋」が切り開く新たなビジネスモデル

1. 借金10億円、倒産まであと半年――創業100年の老舗旅館「陣屋」をたった3年でV字回復させた方法
2. 日清食品HDのCIOが語る、生成AIの全社活用と自社環境構築の舞台裏
3. サンリオの「キティちゃん」を支えるデータベースのチカラ
4. これを旅館と呼んでいいのか!?　老舗旅館「陣屋」が切り開く新たなビジネスモデル
5. 元組み込みエンジニアの農家が挑む「きゅうり選別AI」　試作機3台、2年間の軌跡