インターネットサービスプロバイダであるIIJでは、自社のサービスを安定運用 するために、大量のログやトラフィック情報を取得し解析しています。このよ うな大量データの処理と言えばHadoopを用いることが多いですが、IIJ では Hadoopを用いずに自らの手で分散処理ソフトウェアを開発し、活用してきまし た。本講演では、わざわざ自分達で開発した理由、その仕組み、そして実際に 多数のサーバからなる分散処理環境を運用してみた経験について説明します。